batch-processing-jobs
该技能用于实现健壮的批处理系统,涵盖作业队列、调度器、后台任务与分布式 worker,适用于处理大型数据集、定时报告生成、邮件/通知活动、数据导入导出、图片/视频处理、ETL 管道、清理与维护任务、长时间运行的计算以及批量数据更新等场景。文档提供 Bull 队列(Node.js)、Celery 风格 Worker(Python)和 Cron 作业调度器等参考实现方向,并强调幂等性、重试与指数退避、超时设置、死信队列、作业优先级、连接池、优雅关闭与队列深度监控等最佳实践。