SuperAPI AI 工具集

fetch-url

通用与其它

查看项目

更新于 10-15 16:45

技能介绍

用途:渲染网页 URL,去除噪声、提取正文,并输出为 Markdown(默认)或其他格式或原始 HTML,以减少 Token 消耗。

主要能力:仅支持 http / https;默认使用 Playwright 渲染,自动探测本地 Chromium 系浏览器路径;输出格式可选 csv、html、json、markdown、raw-html、txt、xml、xmltei,其中 raw-html 直接输出渲染后的 HTML(不经 trafilatura)。

使用方式:在当前文件所在目录运行 ./scripts/fetch_url.py URL,且必须直接当作可执行文件执行。未探测到浏览器时需安装 Playwright 浏览器:uv run playwright install chromium。可用参数:--output 写入文件(默认 stdout)、--timeout-ms 设置 Playwright 导航超时(毫秒,默认 60000)、--browser-path 指定本地 Chromium 系浏览器路径(默认自动探测)、--output-format 指定输出格式(默认 markdown)。示例:./scripts/fetch_url.py https://example.com --output ./page.md --timeout-ms 60000。参考文件:scripts/fetch_url.py。

适用场景:需要将网页内容转成更省 Token 的正文文本或结构化格式时使用;如需原始渲染 HTML,可用 raw-html。

限制:仅支持 http / https;依赖 Playwright 及本地 Chromium 系浏览器(缺失时需安装);其他平台兼容性、收费与价格信息暂未提供。