用途:为 Bright Data 代理流量与数据集任务分别设计并发与退避控制器,基于观测到的供应商信号和自有预算,而不是假设存在统一的全局请求上限。
主要能力:按通道拆分独立限制(代理请求、Browser API 会话、异步触发、进度轮询、下载、投递 worker);基于证据的退避策略,仅重试幂等的瞬时工作,遵守供应商指引,使用有界抖动,限制尝试次数与耗时,并在策略、认证或数据错误时打开熔断;逐步调优,一次只改一个限制,经批准的灰度对比吞吐、错误与成本,除非证据与负责人批准否则保留较低限制。
使用方式:先用 Read 与 Grep 分析脱敏指标与文档化错误码,查找 429、Retry-After、供应商错误码、活跃数据集任务、单 IP 集中度与队列深度;再用 Write 与 Edit 编写控制器配置、测试与运行手册。该技能不运行实时流量,也不修改 Bright Data 账户限制。
适用场景:数据集触发返回租户级并行任务错误时,停止启动新任务并继续对自有快照做有界进度轮询;代理流量返回单 IP 429 时,降低压力并检查分布,而非猜测通用速率。
限制:需要工作负载画像(目标、产品、幂等类别)、观测到的延迟/错误/供应商码样本,以及负责人批准的并发、字节、成本与墙钟时间上限。若未保留供应商错误码,429 原因不明,应先改进脱敏埋点再调优;若重试放大队列深度,说明退避缺少准入控制,应打开熔断并排空自有工作;若吞吐提升但成本或错误上限被突破,应回滚已改限制。输出包括各通道并发与队列预算、按文档化失败类别的重试与熔断矩阵、带回滚阈值的灰度对比。官方文档资源涉及代理错误目录、爬虫异步请求指南、下载快照与代理配置选项。