SuperAPI AI 工具集

proxycrawl

数据与分析

查看项目

更新于 10-16 00:27

技能介绍

用途:该技能用于让 AI 代理通过 Membrane CLI 与 ProxyCrawl 数据交互。ProxyCrawl 提供网页抓取 API,帮助开发者在不被封锁的情况下从网站提取数据,处理代理、无头浏览器和反机器人检测。

主要能力:可操作 ProxyCrawl 的 API 请求(创建、获取、列出请求)、代理(列出代理)、订阅(获取订阅详情)、用量(获取用量)和账户(获取账户详情)。当预置动作不覆盖需求时,可通过 Membrane 代理直接向 ProxyCrawl API 发送请求,Membrane 会自动补全基础 URL 并注入认证头,支持凭证过期时透明刷新。

使用方式:先安装 Membrane CLI:npm install -g @membranehq/cli@latest。认证使用 membrane login --tenant --clientName=<agentType>;无头环境会输出授权 URL,用户完成后运行 membrane login complete <code>。连接 ProxyCrawl 使用 membrane connection ensure "https://proxycrawl.com/" --json,若状态为 BUILDING,运行 npx @membranehq/cli connection get <id> --wait --json 轮询至 READY。搜索动作:membrane action list --connectionId=CONNECTION_ID --intent "QUERY" --limit 10 --json。运行动作:membrane action run <actionId> --connectionId=CONNECTION_ID --input '{"key": "value"}' --json。直接请求:membrane request CONNECTION_ID /path/to/endpoint,可配合 -X、-H、-d、--json、--query、--pathParam 等选项。

适用场景:需要抓取网页数据、管理 ProxyCrawl 请求、查看用量或订阅信息的自动化工作流。

限制:需通过 Membrane 认证并建立连接;不应向用户索取 API 密钥或令牌,由 Membrane 管理凭证;未提供具体可用动作的完整列表、请求与输出的数据结构、配额或计费细节,需通过上述命令发现。