用途:为现代云原生数据平台提供战略性数据架构决策指导,适用于新建数据平台、遗留系统现代化、存储范式与建模方法选型、集中式与数据网格取舍、开放表格式选择、Medallion 分层设计及数据治理与编目落地。
主要能力:一是存储范式对比,涵盖数据湖(读时模式、成本优化)、数据仓库(写时模式、ACID、快速查询)与湖仓一体(对象存储上的 ACID、开放表格式),并给出决策框架:仅 BI 且查询已知选仓库,以 ML/AI 为主选湖或湖仓,BI 与 ML 混合且需控成本选湖仓,探索性场景选湖。二是建模方法,维度建模(星型/雪花)用于 BI,3NF 用于 OLTP,Data Vault 2.0 用于合规审计,宽表用于 ML 特征与高性能看板。三是数据网格四原则与六因子就绪度评分(24-30 推进,18-23 混合,12-17 先打基础,6-11 保持集中),并提示小组织、领域不清、无平台团队等红旗。四是 Medallion 架构:Bronze 原始不可变、Silver 清洗去重、Gold 业务聚合与特征,并给出各层数据质量校验点。五是开放表格式:Iceberg 多引擎中立、Delta Lake 面向 Databricks、Hudi 适合 CDC 与频繁 upsert,新项目推荐 Iceberg。六是现代数据栈分层(摄取、存储、转换、编排、可视化、治理)与工具选型建议,以及数据目录、血缘、质量、RBAC/ABAC 与列级脱敏等治理能力。
使用方式:作为技能被调用,按决策框架逐步评估用例、预算与组织规模,并参考其引用文件(决策框架、存储范式、建模方法、数据网格指南、Medallion 模式、表格式、工具推荐、现代数据栈、治理模式、场景)与示例项目。
适用场景:初创数据平台、企业现代化迁移、数据网格就绪度评估等。
限制:资料未提供具体收费、价格与平台支持细节;文中成本区间、评分与工具推荐均来自其公开资料,实际选型需结合自身情况验证。