1. 为什么我要把采集逻辑从脚本搬进 OpenClaw 插件如果你用 OpenClaw 做过数据采集大概率经历过这个循环接到一个新需求写一个独立脚本调通参数跑一段时间然后下一个需求来了把上一个脚本复制一份改改。脚本越堆越多参数散落在各个文件里哪天要统一换一个请求通道得挨个文件翻。我试过把采集逻辑封装成 OpenClaw 的自定义插件之后这件事的性质变了。插件本质上是可复用的功能模块把「抓什么、怎么解析、超时多久、走哪个通道」这些信息收进一个目录里OpenClaw 的 Agent 在对话中就能直接调用它。采集能力从一次性脚本变成了可以反复安装、反复调用的积木。这篇聚焦的是 OpenClaw 自定义采集插件的开发全流程从插件骨架搭建、采集逻辑编写到配置接入。我会给出可复制的插件目录结构和 config.toml 配置骨架演示怎么通过 TaoToken 的统一 Key 和 API 通道完成插件侧的鉴权配置最后附上本地加载插件、触发采集、校验返回结果的完整验证动作。目标很明确让你跑通第一个能用的自定义采集插件。适合谁看已经会用 OpenClaw 跑基础任务、想把手里的采集脚本升级成插件的开发者或者刚开始接触 OpenClaw 插件体系、需要一个能照着敲的完整示例的人。不需要你精通 TypeScript但至少要能看懂 Node 项目的基本结构。2. 前置准备TaoToken 统一 Key 与 OpenClaw 插件环境2.1 为什么插件侧鉴权要走统一 Key采集插件在运行时会调用模型能力做字段抽取、内容清洗、结构化解析。如果每个插件各自维护一套模型调用的 Key 和地址配置会非常散。TaoToken 提供的是统一 Key 加统一 API 通道的方式插件侧只需要读一个环境变量就能完成鉴权配置不用在插件代码里硬编码任何密钥。对插件开发来说这一点很关键插件是要被分发和复用的代码里带密钥是绝对不能接受的。统一 Key 走环境变量注入插件本身保持干净。2.2 拿到 Key 和接入信息先到 TaoToken 控制台创建 API Key。地址是 https://taotoken.net/console?utm_sourcetaotoken_aicg_blog_endutm_mediumcsdnutm_campaignrewriteutm_contentplugin_openclaw_collector 登录后在 API Keys 页面新建一个 Key复制出来先存到安全的地方。接入文档在 https://taotoken.net/doc?utm_sourcetaotoken_aicg_blog_endutm_mediumcsdnutm_campaignrewriteutm_contentplugin_openclaw_collector 里面写清楚了请求地址、鉴权头格式和可用模型列表。API 基础地址是 https://taotoken.net/api 注意这个地址不带任何查询参数直接作为 base URL 使用。2.3 本地环境检查OpenClaw 插件开发需要 Node 22 及以上版本用 ESM 模块。先确认一下node -v # 期望输出 v22.x.x 或更高 npm -v # 期望输出 10.x 或更高如果 Node 版本偏低建议用 nvm 或 fnm 切到 22。OpenClaw 的插件 SDK 对 ESM 有硬性要求CommonJS 的老项目直接搬过来会报模块解析错误。把 Key 写进当前 shell 的环境变量后续所有命令都依赖它export TAOTOKEN_API_KEYsk-你的Key export TAOTOKEN_BASE_URLhttps://taotoken.net/api注意不要把 Key 写进任何会被提交到仓库的文件。本地开发用 shell 环境变量部署时用平台的环境变量注入。3. 插件骨架搭建与 config.toml 配置骨架3.1 创建插件目录结构OpenClaw 的插件根目录默认在~/.openclaw/plugins/。我们创建一个采集插件名字叫collector-plugincd ~/.openclaw/plugins/ mkdir -p collector-plugin/src cd collector-plugin最终要形成的目录结构是这样collector-plugin/ ├── config.toml # 插件配置骨架 ├── package.json # 包元信息与依赖 ├── openclaw.plugin.json # 插件清单 ├── src/ │ ├── index.ts # 插件入口注册工具 │ └── collector.ts # 采集核心逻辑 └── tsconfig.json # TypeScript 配置目录名用小写字母加短横线不要用中文或特殊字符否则 OpenClaw 加载时会识别不到。3.2 编写 config.toml 配置骨架config.toml是插件的配置入口负责声明插件运行时的参数。采集插件最需要配置的是请求超时、单次采集条数上限以及模型通道的接入信息。下面这份骨架可以直接复制[plugin] id collector-plugin name 自定义采集插件 version 0.1.0 entry ./dist/index.js [collector] timeout_seconds 30 max_items 20 user_agent OpenClaw-Collector/0.1 [model] # 统一走 TaoToken 通道Key 从环境变量注入 base_url https://taotoken.net/api api_key_env TAOTOKEN_API_KEY model claude-sonnet-4-5 max_tokens 2048 [logging] level info这里有几个点值得说明。api_key_env写的是环境变量的名字不是 Key 本身插件运行时自己去读这个环境变量。base_url固定为 TaoToken 的 API 地址所有模型调用都从这里走。model字段填你在 TaoToken 文档里看到的可用模型名。3.3 编写插件清单与包信息openclaw.plugin.json是插件的身份声明{ id: collector-plugin, name: 自定义采集插件, version: 0.1.0, entry: ./dist/index.js, capabilities: [tool], config: ./config.toml }package.json里声明 ESM 和依赖{ name: collector-plugin, version: 0.1.0, type: module, main: ./dist/index.js, scripts: { build: tsc }, dependencies: { openclaw: ^0.6.0 }, devDependencies: { typescript: ^5.6.0 } }装依赖npm install3.4 配置 TypeScripttsconfig.json保持最小可用配置重点是 ESM 输出{ compilerOptions: { target: ES2022, module: ESNext, moduleResolution: Bundler, outDir: ./dist, rootDir: ./src, strict: true, esModuleInterop: true, skipLibCheck: true }, include: [src/**/*.ts] }到这里骨架就搭好了。接下来写采集逻辑和插件入口。4. 采集逻辑编写与插件入口注册4.1 写采集核心逻辑在src/collector.ts里实现采集函数。它接收一个 URL 和要抽取的字段列表抓取页面后用模型做结构化抽取返回 JSON// src/collector.ts export interface CollectParams { url: string; fields: string[]; } export interface CollectResult { url: string; data: Recordstring, string; fetchedAt: string; } const TIMEOUT_MS 30_000; export async function collectPage(params: CollectParams): PromiseCollectResult { const controller new AbortController(); const timer setTimeout(() controller.abort(), TIMEOUT_MS); let html ; try { const resp await fetch(params.url, { signal: controller.signal, headers: { User-Agent: OpenClaw-Collector/0.1 }, }); if (!resp.ok) { throw new Error(抓取失败状态码 ${resp.status}); } html await resp.text(); } finally { clearTimeout(timer); } const apiKey process.env.TAOTOKEN_API_KEY; if (!apiKey) { throw new Error(缺少 TAOTOKEN_API_KEY 环境变量); } const baseUrl process.env.TAOTOKEN_BASE_URL ?? https://taotoken.net/api; const prompt [ 从下面的网页内容中抽取指定字段只返回 JSON不要解释。, 字段列表${params.fields.join(, )}, 网页内容, html.slice(0, 8000), ].join(\n); const modelResp await fetch(${baseUrl}/v1/messages, { method: POST, headers: { Content-Type: application/json, x-api-key: apiKey, anthropic-version: 2023-06-01, }, body: JSON.stringify({ model: claude-sonnet-4-5, max_tokens: 2048, messages: [{ role: user, content: prompt }], }), }); if (!modelResp.ok) { const errText await modelResp.text(); throw new Error(模型调用失败${modelResp.status} ${errText}); } const modelJson await modelResp.json(); const textBlock modelJson.content?.find((b: any) b.type text); const raw textBlock?.text ?? {}; let parsed: Recordstring, string {}; try { parsed JSON.parse(raw); } catch { parsed { raw }; } return { url: params.url, data: parsed, fetchedAt: new Date().toISOString(), }; }这段代码里抓取和模型调用是分开的两步。抓取用原生 fetch 加超时控制模型调用走 TaoToken 的/v1/messages接口鉴权头是x-api-keyKey 从环境变量读。html.slice(0, 8000)是为了控制送入模型的上下文长度避免超出 token 限制。4.2 注册插件入口在src/index.ts里把采集函数注册成 OpenClaw 工具// src/index.ts import { defineToolPlugin } from openclaw/plugin-sdk/tool-plugin; import { Type } from sinclair/typebox; import { collectPage } from ./collector.js; export default defineToolPlugin({ id: collector-plugin, name: 自定义采集插件, description: 采集指定 URL 的结构化数据支持自定义抽取字段, tools: [ { name: collect_page, description: 抓取页面并抽取指定字段返回 JSON, parameters: Type.Object({ url: Type.String({ description: 目标页面 URL }), fields: Type.Array(Type.String(), { description: 要抽取的字段列表例如 title, price, }), }), execute: async (params) { const result await collectPage({ url: params.url, fields: params.fields, }); return result; }, }, ], });defineToolPlugin是 OpenClaw 提供的辅助函数专门用来创建工具类插件。parameters用 TypeBox 定义参数结构OpenClaw 会据此生成给模型看的工具描述。execute就是实际执行体返回的对象会作为工具调用结果回传给 Agent。4.3 构建插件npm run build构建成功后dist/目录下会生成index.js和collector.js。如果报模块解析错误检查tsconfig.json里的moduleResolution是否为Bundler以及package.json里是否有type: module。5. 本地加载、触发采集与结果校验5.1 校验插件元数据在安装之前先用 OpenClaw 的校验命令检查插件清单是否合法openclaw plugins validate --entry ./dist/index.js期望输出类似[ok] plugin id: collector-plugin [ok] entry resolved: ./dist/index.js [ok] capabilities: tool [ok] config: ./config.toml如果提示entry not found说明构建产物路径不对回到上一步确认npm run build是否成功。5.2 本地安装插件openclaw plugins install ./collector-plugin安装成功后用列表命令确认openclaw plugins list应该能看到collector-plugin出现在已安装列表里状态为enabled。5.3 触发一次采集OpenClaw 提供了直接测试工具的命令不用启动完整 Agent 服务openclaw tool test collect_page \ --params {url:https://example.com,fields:[title,description]}如果一切正常会返回类似这样的结果{ url: https://example.com, data: { title: Example Domain, description: This domain is for use in illustrative examples. }, fetchedAt: 2026-01-15T08:30:00.000Z }看到data里有抽取出来的字段说明采集链路是通的抓取成功、模型调用成功、结构化解析成功。5.4 在对话中调用插件安装后也可以直接在 OpenClaw 对话里让 Agent 调用它。比如输入帮我采集 https://example.com 的标题和描述Agent 会识别到collect_page工具并调用返回结构化结果。这一步验证的是插件和 Agent 的集成是否正常。5.5 校验模型通道是否走通如果采集返回的data是空的或者只有raw字段说明模型调用可能没成功。单独验证一下 TaoToken 通道curl -s https://taotoken.net/api/v1/messages \ -H Content-Type: application/json \ -H x-api-key: $TAOTOKEN_API_KEY \ -H anthropic-version: 2023-06-01 \ -d { model: claude-sonnet-4-5, max_tokens: 64, messages: [{role:user,content:回复 OK 两个字母}] }返回里有content字段且文本为OK说明 Key 和通道都没问题。如果返回 401检查 Key 是否正确返回 404检查 base URL 是否写成了带路径的形式。6. 本篇常见错误排查6.1 插件加载报Cannot find module最常见的原因是构建产物路径和openclaw.plugin.json里的entry不一致。确认npm run build之后dist/index.js确实存在且entry字段写的是./dist/index.js。另一个可能是package.json里漏了type: module导致 ESM 导入被当成 CommonJS 解析。6.2 模型调用返回 401x-api-key头没带上或者环境变量TAOTOKEN_API_KEY在当前 shell 里没生效。用echo $TAOTOKEN_API_KEY确认一下。如果是在 OpenClaw 服务里跑注意服务的环境变量和当前 shell 是隔离的需要在服务启动配置里注入。6.3 采集结果为空先看抓取是否成功。如果目标页面有反爬fetch可能拿到的是验证页而不是真实内容。可以在collector.ts里临时打印html.length确认。另一个原因是送入模型的html.slice(0, 8000)截断位置不对把关键内容切掉了可以适当调大这个值但要注意 token 消耗。6.4 工具名冲突如果 OpenClaw 提示tool name already exists说明collect_page和核心工具或其他插件重名了。改一个更具体的名字比如collector_plugin_page然后重新构建安装。6.5 超时中断默认超时 30 秒。如果目标页面响应慢或者模型处理长文本耗时久会触发AbortError。可以在config.toml里把timeout_seconds调大同时确认collector.ts里的TIMEOUT_MS和配置保持一致。两处不一致会导致配置不生效。7. 把插件接入长期运行的工作流插件跑通之后下一步通常是让它进入长期运行的采集任务。这时候有两个方向可以走。一个是把采集插件挂到 OpenClaw 的定时任务或 Agent 工作流里让它按计划自动执行。这种情况下模型调用的频率会上升建议用 Coding Plan 来管理长期的调用额度地址是 https://taotoken.net/coding-plan?utm_sourcetaotoken_aicg_blog_endutm_mediumcsdnutm_campaignrewriteutm_contentplugin_openclaw_collector 适合需要持续跑编码和 Agent 任务的场景。另一个是继续扩展插件能力比如加多个工具、加自定义命令、加事件钩子。OpenClaw 的插件体系支持一个插件注册多个工具你可以把「抓列表页」「抓详情页」「字段清洗」拆成三个工具让 Agent 按需组合调用。扩展的时候记得回到openclaw.plugin.json更新capabilities字段。如果你在接入过程中遇到鉴权或通道配置的问题可以先看接入文档 https://taotoken.net/doc?utm_sourcetaotoken_aicg_blog_endutm_mediumcsdnutm_campaignrewriteutm_contentplugin_openclaw_collector 里面有针对不同调用方式的完整参数说明。需要新建或轮换 Key 的时候到 API Keys 页面操作 https://taotoken.net/api-keys?utm_sourcetaotoken_aicg_blog_endutm_mediumcsdnutm_campaignrewriteutm_contentplugin_openclaw_collector 。想先验证模型返回格式再写进插件可以用模型对话页面直接试 https://taotoken.net/chat?utm_sourcetaotoken_aicg_blog_endutm_mediumcsdnutm_campaignrewriteutm_contentplugin_openclaw_collector 确认请求体和返回结构对得上再落到代码里能省掉不少调试时间。