SuperAPI AI 工具集

mandoline

通用与其它

查看项目

更新于 10-16 09:30

技能介绍

用途:Mandoline 面向调查问卷等不规则原始数据,将其整理为统一、自文档化的 BigQuery 表。资料建议在摄取原始数据之前先调用它,尤其当列名不透明(如 S1、Q1r1、编码整数)或 INFORMATION_SCHEMA.COLUMNS 返回空描述时。

主要能力:支持 SPSS(.sav)、CSV、电子表格导出等输入;借助 pyreadstat 提取列名、问题文本、值标签与哨兵值;按七阶段流程工作,包括提取 SPSS 元数据、补充 codebook、检查原始源、设计干净 schema、编写转换 SQL、撰写教学式列描述、丰富表元数据与验证。列描述遵循“显示标签在前、教学细节在后”的规则,回答“是什么、有哪些值、怎么用”三个问题。

使用方式:资料给出 pyreadstat 读取示例(pyreadstat.read_sav("survey.sav", metadataonly=True))以及 BigQuery 建表 SQL 模式,并说明可通过 table.description、friendly_name、labels 更新表元数据。

适用场景:SPSS 调查数据、列名不透明的原始问卷、无元数据的 CSV/表格导入、需要重塑的交叉表导出,以及在首次让 LLM 读取 BigQuery 表之前。

限制:不适用于已有丰富列描述和元数据的数据、已知良好表的快速探索查询、无需持久干净表的一次性分析,以及流式/实时数据(仅面向快照表)。资料未提供收费、价格、平台支持范围等具体信息。