SuperAPI AI 工具集

pii-detection-pipeline

部署与运维

查看项目

更新于 10-16 01:30

技能介绍

用途:用于隐私工程中的个人数据发现、分类与保护,构建生产级 PII 检测与脱敏管道,结合规则模式匹配、机器学习命名实体识别(NER)和云原生发现服务。

主要能力:资料给出直接标识符(姓名、邮箱、电话、SSN、护照号、驾照、信用卡、IBAN、IP、MAC)、准标识符(出生日期、邮编、年龄、性别、国籍、位置)和敏感类别(病历号、健康状况、宗教、政治观点、性取向、生物特征、基因数据)的实体目录,含检测方法与风险等级。Presidio 部分提供分析器、自定义识别器、阈值过滤与匿名化操作符(replace、redact、hash、mask、encrypt)。spaCy 部分可微调 NER 模型添加自定义标签。AWS Macie 部分展示 S3 分类任务、EventBridge、Lambda、Security Hub 的检测与修复架构。

使用方式:安装后按示例配置 PipelineConfig(语言、置信度阈值、实体列表、脱敏策略),初始化 AnalyzerEngine 与 AnonymizerEngine;可注册正则自定义识别器;支持 detect 与 redact;BatchPIIProcessor 可批量处理 CSV 和文本文件并输出统计。

适用场景:文本、结构化文档与 S3 数据的 PII 扫描和脱敏。

限制:资料未提供收费、价格、性能数据或平台范围;安装命令与完整依赖清单暂未提供。