SuperAPI AI 工具集

data-quality-frameworks-sickn33

数据与分析

查看项目

更新于 10-15 23:46

技能介绍

用途:在数据管道中落地数据质量校验,结合 Great Expectations、dbt 测试和数据契约,保障数据管道可靠。适合需要实施质量检查、配置 Great Expectations 校验、构建 dbt 测试套件、建立团队间数据契约、监控数据质量指标或在 CI/CD 中自动化校验的场景。不适用于数据源未定义或不可用、无法修改校验规则或架构、以及任务与数据质量或契约无关的情况。

主要流程:先识别关键数据集与质量维度;再定义期望、测试与契约规则;随后在 CI/CD 中自动化校验并安排定期检查;最后设置告警、责任归属与修复步骤。如需详细模式,可打开 resources/implementation-playbook.md 获取框架、模板与示例。

限制与安全:仅当任务明确符合上述范围时使用;输出不能替代针对具体环境的校验、测试或专家评审。缺少必要输入、权限、安全边界或成功标准时,应停止并请求澄清。避免在没有回退方案时阻塞关键管道,并在校验输出中安全处理敏感数据。