text-normalization-and-large-file-processing

用途：作为Excel工作流的子技能，对表格数据进行文本标准化清洗。主要能力：识别并清洗含前缀符号的异常数值字段（如'.'、'I '、'■ '、'一 '、'_'、'. '等），统一转换为整数类型，无法转换的置为缺失值；用正则表达式清洗文本字段，仅保留Unicode中文字符（\u4e00-\u9fff）。使用方式：指定目标数值列和目标文本列名，分别调用对应清洗函数，生成清洗后新列；随后用openpyxl引擎将结果保存为Excel文件，并在报告中提供下载链接，最后删除数据框并执行垃圾回收以缓解大文件内存压力。关键命令：df.to_excel(output_path, index=False, engine='openpyxl')；下载链接格式为[sandbox:output_path]。适用场景：含异常前缀数值、需提取纯中文的Excel批量清洗。限制：前缀列表为示例，需按实际数据调整；仅保留中文会丢弃其他字符；读取、计数与Parquet优化需参见父工作流SKILL.md。具体环境依赖和完整流程暂未提供。