用途:从任意 URL 抓取网页内容,或先搜索再获取内容,并可将网页提取为结构化数据。
主要能力:支持直接指定 URL 抓取,也支持用搜索查询替代 URL;输出格式可选 markdown、html、text,默认 markdown。
使用方式:通过命令行调用脚本,例如 uv run python -m runtime.harness scripts/mcp/firecrawl_scrape.py --url "https://example.com" --format "markdown";搜索模式使用 --search "查询词"。参数包括 --url(要抓取的 URL)、--format(输出格式)、--search(搜索查询,替代直接 URL)。
适用场景:需要把网页正文转为 markdown 供后续处理、按主题搜索并抓取内容、从页面提取结构化数据时使用。
限制:依赖 Firecrawl MCP,需在 mcp_config.json 中配置 firecrawl 服务器并提供 FIRECRAWL_API_KEY;其余配额、费用与平台细节暂未提供。