用途:当用户要求抓取或获取某个 URL 的内容、从网页提取文本、通过链接阅读文章、获取网站内容、把网页下载并转换为 text/markdown,或总结网页时,可使用该技能。
主要能力:输入一个 URL 后抓取并提取干净的正文内容,支持输出格式 markdown(默认)、text、html;可选将结果保存到指定文件路径;脚本可自动安装依赖 trafilatura 与 requests;支持通过 --metadata 输出标题、作者、日期等元数据。
使用方式:调用捆绑脚本 skills/web-scraper/scripts/scrape.py,参数包括 url(必填)、format(可选,markdown 默认/text/html)、output(可选,保存文件路径)。命令示例:python3 skills/web-scraper/scripts/scrape.py "https://example.com/article";python3 skills/web-scraper/scripts/scrape.py "https://example.com" --format text;python3 skills/web-scraper/scripts/scrape.py "https://example.com" --output article.md;python3 scripts/scrape.py "https://example.com/article" --metadata。运行后把提取内容呈现给用户。
适用场景:网页正文抽取、文章阅读与摘要前的取数、将网页转为文本或 Markdown 存档。
限制:资料未说明对需要登录、反爬、动态渲染页面的处理能力,也未提供请求头、并发、代理等配置说明;定价、平台支持范围等事实暂未提供。