SuperAPI AI 工具集

firecrawl-map

前端与建站

查看项目

更新于 10-15 21:42

技能介绍

用途:发现并列出网站上的所有 URL,可通过搜索过滤定位大站中的特定页面。适合在抓取或爬取前先获取站点链接清单,也是 search → scrape → map → crawl → interact 工作流中的第三步。

主要能力:支持 --limit 限制返回 URL 数量、--search 按查询词过滤、--sitemap 控制 sitemap 处理策略(include/skip/only)、--include-subdomains 包含子域名、--json 输出 JSON、-o/--output 指定输出文件。

使用方式:优先通过 Firecrawl MCP 的原生 firecrawl_map 工具调用,无需本地安装,通过插件的一次性浏览器登录认证;MCP 未连接时回退到 CLI。示例:firecrawl map "<url>" --search "authentication" -o .firecrawl/filtered.txt;获取全部 URL:firecrawl map "" --limit 500 --json -o .firecrawl/urls.json。常见模式是先用 map --search 找到目标 URL,再用 scrape 抓取。

限制:资料未提供具体收费、速率限制或平台支持范围,暂未提供。