用途:控制 Firecrawl 的请求产生速率与页面处理并发,把二者当作不同资源分别管理,限制值应来自当前团队计划与实时队列证据,而非照抄常量。
主要能力:区分提交 RPM、在途浏览器任务、Firecrawl 队列、应用积压、目标源站限制与额度上限;用有界令牌桶控制提交、有界工作池控制任务;在 429 时检查错误分类与 Retry-After,暂停相关生产者、加入抖动、限制尝试次数与总等待时间并保持幂等;以适度频率轮询队列状态,在超时风险上升前施加背压,按既定策略降级或推迟低优先级任务;用合成响应测试速率 429、并发 429、长队列、缺失或无效 Retry-After、取消与恢复;依据实测吞吐加安全余量调优,并输出队列、限流、重试、丢弃/推迟、延迟与成本记录。
使用方式:认证的 Cloud 操作从批准的密钥管理器注入 FIRECRAWL_API_KEY,REST 请求使用 Authorization: Bearer;不得打印、提交、传输密钥或把密钥放入 URL。无密钥访问仅在当前文档明确允许且工作负载可接受其限制时使用。用 Read、Glob、Grep 检查代码、配置、测试与证据,仅在获批时用 Write/Edit 修改实现或文档。
限制与边界:提高生产者或页面并发、延长总重试时间、增加计划容量、绕过背压或调整工作负载优先级前需获得批准。不得仅因调用本技能就调用 Firecrawl、轮换密钥、更改账户设置、抓取目标或部署。限制来源过期或未知时应保守起步并要求核实;Retry-After 超过任务截止时间应推迟或失败而非睡过 SLO;团队队列持续饱和应停止生产者并升级容量或调度,不得轮换密钥规避共享限制。同一团队所有密钥共享速率计数器,批量任务共享抓取限制。具体计划数值、价格与自托管版本信息暂未提供,应以官方 Firecrawl 文档为准。