SuperAPI AI 工具集

glean-data-handling

数据与分析

查看项目

更新于 10-15 23:26

技能介绍

用途:为 Glean 企业检索的文档导入流程提供 PII 过滤、数据分级、权限与合规处理规范。Glean 从 Google Drive、Confluence、Slack、Jira、Salesforce 等连接器摄取文档并建立统一索引,数据含索引正文、连接器元数据、用户权限映射、查询日志和分析数据;文档正文在索引前必须过滤 PII,权限边界须保留以防跨团队泄露,保留策略须满足 GDPR/CCPA。

主要能力:一是正文 PII 过滤,用 stripPII 将邮箱、电话、SSN 替换为占位符;二是导入,按每批最多 100 条向 https://customer-be.glean.com/api/index/v1/bulkindexdocuments 批量提交;三是分析导出,向 https://customer-be.glean.com/api/v1/analytics 请求 query_count、click_through、zero_results 等指标并脱敏用户标识;四是文档校验,检查 id、datasource、title、body、permissions、updatedAt,缺失权限默认拒绝全部。

使用方式:导入前先盘点字段与源 ACL,未知权限或分级默认拒绝并隔离;在有界的暂存批次上执行脱敏与模式校验,只记录条数、规则版本和不透明文档 ID;对允许与拒绝两类测试主体比对源与索引 ACL;分批幂等提交并保留可回滚清单。校验失败应停止批次、仅删除暂存产物并上报数据负责人,不得放宽脱敏或 ACL 规则。

限制与说明:正则匹配只是防护措施,不保证敏感数据已完全去除;凭据应存于密钥管理并定期轮换;查询日志默认保留 90 天;403、权限不一致、PII 残留、零结果激增、429 等问题的处理方式见资料列出的错误表。资料未提供官方收费、价格与平台支持信息。