用途:metadata-extractor 是 Data Pipelines 领域中的自动激活技能,用于在数据管道相关工作中提供元数据提取任务的自动化协助。当请求中提到“metadata extractor”,或询问其模式与最佳实践,或需要 ETL、数据转换、工作流编排、流式数据处理等数据管道技能支持时,该技能会自动激活。
主要能力:提供分步骤的操作指导,遵循行业最佳实践与模式,生成可用于生产的代码与配置,并按常见标准校验输出结果。输出包括生成的配置与代码、最佳实践建议以及校验结果。
使用方式:无需手动调用,在相关请求中提及 metadata extractor 即可触发。示例请求为“Help me with metadata extractor”,返回分步骤指导并生成相应配置。
适用场景:数据管道中的元数据提取、ETL、数据转换、工作流编排与流式数据处理。标签包括 etl、airflow、spark、streaming、data-engineering。
限制与前提:需要配置相关开发环境,能够访问必要工具与服务,并具备数据管道概念的基础理解。常见错误包括配置无效(缺少必填字段,需查阅文档确认参数)、工具未找到(依赖未安装,需按前提安装)、权限被拒绝(访问权限不足,需核实凭据与权限)。官方文档、最佳实践指南、社区示例与教程等资源的具体地址暂未提供。