SuperAPI AI 工具集

desearch-crawl

前端与建站

查看项目

更新于 10-15 21:08

技能介绍

用途:从任意网页 URL 抓取并提取内容,返回干净文本或原始 HTML,适合需要读取网页完整内容的场景。

主要能力:支持两种输出格式,text(默认,返回干净文本)与 html(返回原始 HTML)。响应为纯文本或原始 HTML,不是 JSON。

使用方式:先从 https://console.desearch.ai 获取 API 密钥,设置环境变量 export DESEARCH_API_KEY='your-key-here'。抓取网页(默认返回干净文本):scripts/desearch.py crawl "https://en.wikipedia.org/wiki/Artificial_intelligence"。获取原始 HTML:scripts/desearch.py crawl "https://example.com" --crawl-format html。选项 --crawl-format 用于指定输出格式,取值为 text(默认)或 html。

适用场景:读取文档页面、获取页面原始 HTML 用于分析等。建议优先使用 text 格式,避免标记内容占用智能体上下文。

限制:需要有效 API 密钥,缺失或无效时返回 401 Unauthorized;余额不足时返回 402 Payment Required。资料未提供其他平台、价格或效果信息。