SuperAPI AI 工具集

scrapinghub

编程与开发

查看项目

更新于 10-16 00:27

技能介绍

用途:该技能用于让 AI 代理与 Scrapinghub(云端网页抓取平台)交互,管理数据、记录并自动化工作流,适用于需要读取或操作 Scrapinghub 数据的场景。

主要能力:围绕 Spider、Job、Project、Account、API Key 等对象进行操作;通过 Membrane 预置动作完成认证、分页与错误处理;当预置动作不覆盖需求时,可通过代理直接请求 Scrapinghub API。

使用方式:先安装 CLI:npm install -g @membranehq/cli@latest。登录:membrane login --tenant --clientName=<agentType>,无头环境会打印授权 URL,完成后执行 membrane login complete <code>。建立连接:membrane connection ensure "https://scrapinghub.com" --json;若状态为 BUILDING,用 npx @membranehq/cli connection get <id> --wait --json 轮询至 READY。搜索动作:membrane action list --connectionId=CONNECTION_ID --intent "QUERY" --limit 10 --json。运行动作:membrane action run <actionId> --connectionId=CONNECTION_ID --input '{"key": "value"}' --json。代理请求:membrane request CONNECTION_ID /path/to/endpoint,支持 -X、-H、-d、--json、--query、--pathParam 等选项。任意命令加 --json 可获得机器可读输出。

限制:官方文档为 https://doc.scrapinghub.com/;具体可用动作、参数与返回结构需通过 action list 查询,资料未提供完整清单。不要向用户索取 API Key 或令牌,应通过连接由 Membrane 在服务端管理凭证。具体收费、价格与平台支持范围暂未提供。