SuperAPI AI 工具集

scrapingbot

数据与分析

查看项目

更新于 10-16 00:27

技能介绍

用途:该技能用于通过 Membrane CLI 与 ScrapingBot 网页抓取 API 交互,帮助用户以编程方式从网站提取数据,并管理 ScrapingBot 中的抓取任务、账户、资料、账单和发票等对象。适用于市场调研、线索生成等自动化数据采集场景。

主要能力:可围绕 Scraping、Scraping Job、Account、Profile、Billing、Invoice 等实体执行操作,并使用相应的动作名称与参数。Membrane 负责认证与凭据刷新,无需用户手动提供 API 密钥或令牌。

使用方式:先安装 CLI:npm install -g @membranehq/cli@latest;然后登录:membrane login --tenant --clientName=<agentType>,无交互环境会打印授权 URL,用户完成登录后执行 membrane login complete <code>。连接 ScrapingBot:membrane connection ensure "https://www.scraping-bot.io/" --json;若连接处于 BUILDING 状态,可用 npx @membranehq/cli connection get <id> --wait --json 轮询直至 READY。查找动作:membrane action list --connectionId=CONNECTION_ID --intent "QUERY" --limit 10 --json;运行动作:membrane action run <actionId> --connectionId=CONNECTION_ID --json,参数可通过 --input '{"key": "value"}' 传入。当预置动作不满足需求时,可用 membrane request CONNECTION_ID /path/to/endpoint 直接代理请求 ScrapingBot API,支持 -X、-H、-d、--json、--query、--pathParam 等选项。

限制:官方文档为 https://www.scrapingbot.com/documentation/。资料未提供具体动作清单、参数细节、计费方式与速率限制,使用前需查阅官方文档或通过 action list 发现可用动作。首次连接需用户在浏览器完成认证;BUILDING 状态需轮询等待,CONFIGURATION_ERROR 或 SETUP_FAILED 时需检查错误信息。