用途:该技能为数据目录更新(data catalog updater)任务提供自动化协助,属于数据管道(Data Pipelines)领域,覆盖 ETL、数据转换、工作流编排与流式数据处理等场景。
触发方式:在请求中提及“data catalog updater”,或询问其模式与最佳实践时自动激活;需要数据管道相关技能帮助时也可使用。
主要能力:提供分步指导,遵循行业最佳实践与模式,生成可用于生产的代码与配置,并按通用标准校验输出。输出包括生成的配置与代码、最佳实践建议以及校验结果。
使用示例:请求“Help me with data catalog updater”,将返回分步指导并生成相应配置。
前置条件:已配置相关开发环境、可访问必要工具与服务、对数据管道概念有基本理解。
错误处理:配置无效(缺少必填字段)时查阅文档确认必填参数;工具未找到(依赖未安装)时按前置条件安装所需工具;权限被拒绝(访问不足)时核实凭据与权限。
资源与关联:提供相关工具的官方文档、最佳实践指南、社区示例与教程;属于 Data Pipelines 技能类别,标签为 etl、airflow、spark、streaming、data-engineering。
限制:资料未提供具体支持的平台、安装命令、价格或实际效果信息,暂未提供。