SuperAPI AI 工具集

Olostep

Olostep 是一款面向 AI 的网页数据基础设施 API,将搜索、抓取、爬取、结构化与监控网页整合到单一接口中,用于驱动 AI 智能体、研究、数据增强、RAG 和实时数据工作流。它通过裸金属服务器、住宅代理和无头浏览器处理请求,免去维护浏览器、代理和验证码的负担。开发者可使用面向对象 API、原生 Python 与 NodeJS SDK、CLI,以及支持 MCP 的集成方式。提供 /scrapes、/crawls、/maps、/batches、/searches、/answers、/monitors 等端点,支持将任意 URL 转为 LLM 可用的 Markdown、HTML、截图、PDF 或结构化 JSON,单批次最多处理 10k 并发 URL、5-8 分钟出结果,并能并行扩展至百万级请求。官网提供免费试用(500 次成功请求)及付费套餐,价格暂未完整提供。

访问官网

工具介绍

Olostep 定位为面向 AI 的网页数据基础设施,主打用“一个 API”完成搜索、抓取、爬取、结构化与监控。其官网称其专为知识工作型 AI 构建,是“最佳的智能体搜索、抓取与爬取 API”。

用途方面,Olostep 主要服务于 AI 智能体、研究、数据增强、RAG 和实时数据工作流。它可把网页数据接入 AI 应用、智能体和数据管道,也支持通过 /agents 端点用自然语言提示自动化复杂数据管道,并可传入自有内部知识作为上下文。

主要能力包括:

  1. 抓取(/scrapes):将任意 URL 转为 LLM 可用的 Markdown、HTML、截图、PDF 或结构化 JSON,可处理 JS 渲染页面、动作和提取工作流,无需自行维护浏览器、代理或脆弱的爬虫。
  2. 爬取(/crawls):大规模爬取网站、收集子页面内容,可控制深度和 URL 模式,返回干净的 HTML 或 Markdown,用于索引、数据增强、RAG 和 AI 工作流。
  3. 站点地图(/maps):通过 sitemap 和页面链接发现网站上的所有 URL,支持按路径模式过滤、分页,并生成干净的 URL 列表,用于 SEO、爬取和批处理。
  4. 批处理(/batches):单个批次最多处理 10k 并发 URL,5-8 分钟返回干净网页数据和聚合内容,可并行运行多个批次以扩展至数百万并发请求。
  5. 搜索(/searches):用自然语言搜索网页,返回相关链接、标题和描述,支持语义搜索。
  6. 答案(/answers):用自然语言搜索网页并获取 AI 生成的答案,支持按所需 JSON 格式返回验证过的结果和来源。
  7. 监控(/monitors):用自然语言创建定时网页监控,追踪单页或全网变化、增量、提取结构化洞察,并通过邮件、webhook 或短信接收变更通知。

使用方式方面,官网称其为开发者打造:提供面向对象 API、原生 Python 和 NodeJS SDK 客户端、元数据支持、webhook 事件,易于试用和扩展。还提供 CLI,可用 npx -y olostep-cli@latest --help 在终端直接执行 map、scrape、crawl、批处理和生成答案,输出干净 JSON,便于脚本、CI 管道和 AI 智能体使用。此外支持将 Olostep 添加到兼容 Model Context Protocol 的 MCP 客户端,示例注册配置为 {"mcpServers":{"olostep-web":{"command":"npx","args":["-y","olostep-mcp"],"env":{"OLOSTEP_API_KEY":"YOUR_API_KEY"}}}}。

适用场景示例包括:采购领域追踪电商评论、社交粉丝、门店分布、品牌产品数和产品成分;制造业追踪各供应商库存与价格变化、监控交货周期、检测供应商变化和短缺信号;品牌保护扫描市场与网站、检测仿冒品牌和设计、截取带时间戳截图并归档页面快照;营销领域爬取博客内容、分析品牌提及、研究竞品、标记 AI 答案中的引用、监控竞品页面;以及监控网页 DOM 变化、库存、价格、职位空缺、评论评分,跟踪投资组合公司、构建市场情报、大规模研究公司、自动化 GTM 和招聘等。

限制与费用方面,官网称其为市场上最具成本效益的网页数据 API,并列出:无需信用卡的免费试用 $0,含 500 次成功请求,所有请求均经 JS 渲染并使用住宅 IP,有较低速率限制;Starter $9/月,含 5000 次成功请求和 150 并发请求,每千次成本 $0.495;Standard $99/月,含 20 万次成功请求和 500 并发请求,每千次成本 $0.399;Scale $399/月,含 100 万次成功请求和 AI 驱动的浏览器自动化。对于用量波动或不喜欢订阅的用户,可购买有效期为 6 个月的积分包。其余具体限制暂未提供。