用途:通过 Firecrawl API 完成网络搜索与网页抓取,适合需要搜索网络、抓取网站(包括 JavaScript 较重的页面)、爬取整个站点或提取内容的场景。
主要能力:提供搜索、单页抓取和整站爬取三类操作,并附带脚本与 API 参考文档。
使用方式:先设置 API 密钥,在环境变量或 .env 文件中配置:export FIRECRAWL_API_KEY=fc-xxxxxxxxxx。随后可执行:firecrawl_search "your search query" --limit 10 进行搜索;firecrawl_scrape "https://example.com" 抓取单个页面;firecrawl_crawl "https://example.com" --max-pages 50 爬取整站。
脚本:scripts/search.py 用于搜索网络;scripts/scrape.py 用于抓取单个 URL;scripts/crawl.py 用于爬取整个网站。详细 API 文档与高级选项见 references/api.md。
限制:需有效的 Firecrawl API 密钥;其余收费、价格、平台与效果等资料暂未提供。