用途:该技能面向 Apache Airflow 的生产化使用,帮助创建数据管道编排、设计 DAG 结构与依赖关系、实现自定义算子与传感器、在本地测试 DAG、配置生产环境以及调试失败的 DAG 运行。资料说明其提供可投产的 Airflow 模式,涵盖 DAG 设计、算子、传感器、测试与部署策略。
主要能力:包括数据管道编排、DAG 结构与依赖设计、自定义算子和传感器实现、本地测试 DAG、生产环境搭建与失败排查。技能还附带 resources/implementation-playbook.md,内含详细模式、检查清单和模板。
使用方式:先识别数据源、调度周期与依赖关系;设计幂等任务,明确归属与重试策略;实现带可观测性与告警钩子的 DAG;在预发环境验证并编写运维手册。详细模板与清单参见 resources/implementation-playbook.md。
适用场景:需要 Airflow 编排数据管道、设计 DAG 依赖、扩展算子或传感器、本地验证以及生产部署与故障调试时使用。
限制与注意:若只需简单的 cron 任务或 shell 脚本,或工具栈中不包含 Airflow,或任务与工作流编排无关,则不应使用本技能。安全方面,未经批准不要更改生产 DAG 的调度;测试回填与重试时需谨慎,防止数据重复。其余平台支持、收费与具体实现细节暂未提供。