MrScraper 是一款 AI 驱动的网页抓取工具,旨在帮助用户从任意网站获取干净、结构化的数据。根据官方资料,它可以将任意网站转化为结构化 JSON,用户可通过纯英文提示词(plain-English prompts)或可视化记录器(visual recorder)来操作。
主要能力
- AI 驱动的抓取:AI 理解页面内容,自动识别关键信息并输出结构化结果,将杂乱的网页转换为可直接使用的数据。
- 自动轮换住宅代理:使用自动轮换的住宅 IP 地址,帮助避免封锁和限制,保持隐身与畅通。
- 将任意网站转为 API:AI 识别页面布局、自动检测模式,并以易用的 API 形式交付结果。
- JavaScript 场景:在抓取前控制页面,支持点击、滚动、等待元素或运行自定义 JavaScript,以揭示动态内容并收集完整加载的数据。
- 截图 API:通过单次 API 调用捕获任意网站的全页或部分截图,获得与真实浏览器中一致的页面图像。
使用方式 官方描述为“用纯英文提示或可视化记录器将任意网站转为结构化 JSON”,并可“定时调度任务,将数据发送到数据库”。此外提供“从零启动第一个自动化抓取器的分步指导”。用户可免费开始,获得 1,000 tokens。
适用场景 官方列出可用于数据研究、电商、竞品数据研究,以及企业数据重塑(将分散的网页数据转化为干净可靠的企业智能)。
限制与说明 资料中未提供具体的定价方案细节、支持的网站范围、请求频率限制或技术限制。安全与合规方面提到加密数据处理和符合 GDPR 的流程。企业级支持包括合作伙伴驱动的直接支持、可扩展基础设施和可靠交付(优先支持与明确 SLA 承诺)。