用途：围绕 Databricks 与 Delta Lake 构建生产级 ETL 数据管道，按 Medallion 架构分层（Bronze→Silver→Gold）。
主要能力：
- Bronze 层：原始摄取，写入元数据列 _ingested_at、_source_file，使用 mergeSchema 处理模式演进；可用 Auto Loader（cloudFiles）流式摄取并推断模式。
- Silver 层：通过 Change Data Feed 读取 Bronze，做清洗与转换（去空格/转小写、时间解析、PII 哈希、过滤空值、生成代理键），以 upsert 模式合并。
- Gold 层：按业务维度与时间粒度聚合 Silver，使用分区级覆写提高更新效率。
- 可选 Delta Live Tables：用 @dlt.table 声明式定义管线，用 @dlt.expect_or_drop 做数据质量期望。
必要用法与前置：需先完成 databricks-install-auth 安装认证，理解 Delta Lake 概念，建议配置 Unity Catalog。示例调用：bronze.ingest_to_bronze(...)、silver.transform_to_silver(...)、gold.aggregate_to_gold(...)。输出为带 ACID 事务的 Delta Lake 表。
错误处理：模式不匹配用 mergeSchema；重复记录补充以主键的合并逻辑；空值在 Silver 加期望或过滤；内存不足需扩容集群或分区。
适用场景：数据摄取管道、Medallion 分层建模、面向分析的业务聚合。限制：资料未给出具体价格、平台版本要求与完整代码细节，仅提供流程与示例框架。