SuperAPI AI 工具集

web-reader

通用与其它

查看项目

更新于 10-16 05:51

技能介绍

用途:把任意 URL 转换为干净的 Markdown 文本,去除广告、导航、样式等干扰内容。适合阅读 API 文档(如 tushare、OKX、yfinance 等)、技术文章与博客、研究报告与公告、GitHub README/Wiki 页面。

主要能力:直接调用 read_url 工具(不要用 bash + requests),例如 read_url(url="https://tushare.pro/document/2?doc_id=27")。返回 JSON,包含 status、title、url、content(Markdown 格式正文)、length 等字段。

限制与注意事项:内容超过 8000 字符会被截断,并在末尾标注总长度;动态渲染的 SPA 页面可能只返回骨架 HTML;中文内容可正常支持。

隐私与新鲜度:read_url 会把完整目标 URL(含查询字符串)转发给外部 Jina Reader 服务(r.jina.ai),因此不要传入含凭据、令牌或私有/内网地址的 URL。结果可能是缓存快照而非实时数据,过期时 JSON 会带 "cached": true,可传 no_cache=true 强制重新抓取(较慢,仅在需要最新数据时使用)。若站点屏蔽读取器(如 HTTP 451),可用 bash + requests 手动抓取作为兜底,但会绕过本工具的 URL 安全防护和 Jina 层,应谨慎使用,且绝不用于内网或需认证的 URL。

常见用法示例:读取 API 文档 read_url(url="https://tushare.pro/document/2?doc_id=27");读取技术文章 read_url(url="https://blog.example.com/quantitative-trading-guide");获取 GitHub 项目信息 read_url(url="https://github.com/PaddlePaddle/PaddleOCR")。