SuperAPI AI 工具集

seo-firecrawl

营销与增长

查看项目

更新于 10-15 16:43

技能介绍

用途:通过 Firecrawl MCP 提供整站爬取、站点结构发现、单页深度抓取和站内搜索,供 SEO 审计与内容分析使用。需先安装扩展:./extensions/firecrawl/install.sh,并确认 MCP 服务器已连接(firecrawl_scrape 等工具可用),否则提示用户安装。

主要能力与用法:

  • /seo firecrawl crawl <url>:整站爬取(firecrawl_crawl),返回页面内容、元数据与链接;参数含 limit(默认 100,最大 500)、maxDepth(默认 3)、includePaths/excludePaths 及 scrapeOptions.formats(markdown、html、links)。
  • /seo firecrawl map <url>:仅发现 URL(firecrawl_map),limit 默认 5000,可用 search 过滤,速度快、消耗低。
  • /seo firecrawl scrape <url>:单页抓取(firecrawl_scrape),支持 formats(含 screenshot)、onlyMainContent、waitFor、timeout、actions,适合 SPA/JS 渲染页。
  • /seo firecrawl search <query> <url>:站内搜索(firecrawl_search),limit 默认 10。

注意:免费额度每月 500 credits,1 credit 对应 1 页爬取或抓取,map 每 URL 约 0.5 credits;大批量前应告知用户预估消耗。返回内容由用户在会话中处理。错误如缺少 FIRECRAWL_API_KEY、402、429、408、403 有对应处理建议;不可用时可用 fetch_page.py 或 WebFetch 兜底。工作完成后可按共享缓存规范写入 .seo-cache/。