SuperAPI AI 工具集

purview-data-map

数据与分析

查看项目

更新于 10-16 01:48

技能介绍

用途:Microsoft Purview Data Map 是数据治理的基础层,负责发现、扫描并映射来自 Azure、多云、SaaS 和本地数据源的元数据与分类,为统一目录、数据血缘以及下游保护决策提供支撑。适用于构建企业级数据资产清单及其分类,作为治理、安全和数据产品发布的基础。不适用于租户内 Microsoft 365 分类(改用 purview-data-classification)或 AI 提示可见性(改用 purview-dspm-ai)。

主要能力与运行时选择:Azure 源(Storage、SQL、Synapse、Fabric、Cosmos)使用托管运行时;AWS S3/RDS、GCP BigQuery、公共 SaaS 使用托管运行时并将凭据存入 Key Vault;本地 SQL、Oracle、文件共享使用域加入 Windows 主机上的自托管集成运行时(SHIR);仅私网终点的 Azure 源使用 SHIR 或 VNet 集成托管运行时;Power BI 租户使用原生连接器,无需运行时配置。原则是先选托管运行时,仅在网络或私网端点可达性要求时才部署 SHIR,并将 SHIR 主机视为 Tier-0 基础设施。

使用方式:规划集合(按业务域或地理设计集合层级,集合驱动 RBAC 与资产组织);注册源(将数据源连接到正确集合,使用合适凭据);选择集成运行时;配置扫描与规则集(按扫描规则集安排扫描,应用内置 SIT 与自定义分类,在支持处提取血缘,先增量后全量);策展(审查发现的资产、应用词汇表术语、分配数据所有者/管理员、基于真实匹配调整自定义分类);治理访问(用集合组织资产并按域限定权限,优先集合级角色分配而非根级);运营(监控扫描失败、分类漂移与成本,按源重要性调整扫描频率)。

防护要点:限定扫描范围与计划以控制成本与源负载,首日不要全量全深度扫描,先抽样后全量;将 SHIR 主机作为敏感基础设施加以保护(打补丁、限制登录、监控);在依赖分类执行下游保护前验证准确性,按 SIT 抽样匹配并调整置信度;凭据使用 Key Vault,切勿将机密嵌入扫描配置;Data Map 按容量单位计费,超量扫描会推高成本而无治理价值。常见反模式包括:把所有源注册到根集合并给所有人 Data Reader;对 PB 级数据湖安排每周全量扫描;在工作站或共享跳板机上运行 SHIR;跳过词汇表与所有权步骤;把 Data Map 当作一次性加载而非持续策展的目录。

参考资料:Data Map 概述 https://learn.microsoft.com/purview/concept-elastic-data-map;注册与扫描源 https://learn.microsoft.com/purview/scan-data-sources;管理集成运行时 https://learn.microsoft.com/purview/manage-integration-runtimes;分类 https://learn.microsoft.com/purview/concept-classification;集合与访问控制 https://learn.microsoft.com/purview/how-to-create-and-manage-collections;定价与容量 https://learn.microsoft.com/purview/concept-elastic-data-map。