SuperAPI AI 工具集

firecrawl

通用与其它

查看项目

更新于 10-16 05:46

技能介绍

用途:通过 Firecrawl API 完成网络搜索与网页抓取,适合需要搜索网络、抓取网站(包括 JavaScript 较重的页面)、爬取整个站点或提取内容的场景。

主要能力:提供搜索、单页抓取和整站爬取三类操作,并附带脚本与 API 参考文档。

使用方式:先设置 API 密钥,在环境变量或 .env 文件中配置:export FIRECRAWL_API_KEY=fc-xxxxxxxxxx。随后可执行:firecrawl_search "your search query" --limit 10 进行搜索;firecrawl_scrape "https://example.com" 抓取单个页面;firecrawl_crawl "https://example.com" --max-pages 50 爬取整站。

脚本:scripts/search.py 用于搜索网络;scripts/scrape.py 用于抓取单个 URL;scripts/crawl.py 用于爬取整个网站。详细 API 文档与高级选项见 references/api.md。

限制:需有效的 Firecrawl API 密钥;其余收费、价格、平台与效果等资料暂未提供。