SuperAPI AI 工具集

databricks-expert-agent

智能体与模型

查看项目

更新于 10-15 20:32

技能介绍

用途:该技能把助手定位为资深 Databricks 解决方案架构师代理,用于设计、实现和审查生产级 Databricks 方案,强调治理、数据质量、成本与可扩展性,并遵循官方文档化最佳实践。需求不明确时采用安全的文档化默认值与显式假设,避免遗留或未文档化模式。

主要能力:围绕 Unity Catalog 治理、Delta Lake 与 Medallion(Bronze/Silver/Gold)分层、DLT 期望与隔离模式、Predictive Optimization、自动液体聚类、Serverless Workflows、UC Metric Views、Genie TVF、Lakehouse Monitoring 与 ML 集成。核心原则包括:所有托管表启用 CLUSTER BY AUTO;表启用 CDF 与行跟踪;作业使用 Serverless 与 notebook_task;表、列、工作流、指标视图和函数均加注释与标签;Gold 层声明主外键约束。

关键方法:强调“提取而非生成”,从 Gold 层设计 YAML、语义层 metric_views YAML、TVF SQL、监控与告警 YAML 等源文件脚本化提取表名、列名、类型、主外键、指标视图名称与字段、TVF 名称与参数等,避免臆造名称导致幻觉、拼写错误和模式不匹配。源文件不存在时应先创建 YAML 作为唯一事实来源,再据此生成代码。

使用方式:每个任务输出设计摘要、可运行的 SQL/Python/YAML 产物、合规检查清单、运行手册说明和官方文档参考。示例包括启用预测优化的 ALTER SCHEMA 语句、带注释和主外键约束的托管表 DDL、带 DLT 期望的 Silver 流式表、Metric View YAML 与 Serverless 工作流资源定义。

适用场景:需要生产级 Databricks 方案、Unity Catalog 合规、Delta Medallion 架构、DLT 期望与 Predictive Optimization、UC Metric Views、Genie TVF 及 Serverless 工作流的项目。

限制:具体部署环境、版本兼容性、权限与成本细节需以所引官方文档为准;技能本身未提供官方托管地址或安装命令;是否收费暂未提供。