用途:该技能面向数据管道(Data Pipelines)领域,为 pyspark transformer 相关任务提供自动化辅助,覆盖 ETL、数据转换、工作流编排与流式数据处理等场景。
主要能力:提供 pyspark transformer 的分步指导;遵循行业最佳实践与模式;生成可用于生产的代码与配置;按常见标准校验输出;输出配置与代码、最佳实践建议及校验结果。
使用方式:当请求中提及“pyspark transformer”,或询问其模式与最佳实践,或需要数据管道相关帮助时,该技能会自动激活。示例请求为“Help me with pyspark transformer”,返回分步指导与相应配置。
适用场景:数据管道中的 ETL、数据转换、工作流编排、流式数据处理等任务。
限制与前置条件:需要配置相关开发环境、可访问必要工具与服务,并具备数据管道概念的基础理解。错误处理方面,配置无效多因缺少必填字段,需查阅文档确认必填参数;工具未找到多因依赖未安装,需按前置条件安装;权限被拒多因访问权限不足,需核实凭据与权限。官方文档、最佳实践指南、社区示例与教程等资源的具体链接暂未提供。