SuperAPI AI 工具集

dont-be-greedy

数据与分析

查看项目

更新于 10-15 21:38

技能介绍

用途:在用户上传或引用数据文件(CSV、JSON、XLSX、TXT、LOG 等)或超过 100KB 的文件时,先评估 token 成本,再选择合适的处理方式,防止超大数据直接进入上下文。

主要能力与流程:

  1. 估算成本:加载任何数据文件前运行 python scripts/estimate_size.py "<file_path>",返回字节数与估算 token 数。
  2. 按规模选择策略:估算 token 小于 10,000 时运行快速检查并直接加载;10,000 至 30,000 时快速检查并考虑过滤;超过 30,000 时先分块并摘要再加载。
  3. 执行对应工作流:快速检查用 python scripts/quick_inspect.py "<file_path>",返回统计信息并直接加载;大文件用 python scripts/chunker.py "<file_path>" 分块,再对分块文件执行 python scripts/summarize.py "<chunk_file>",返回整体摘要、各分块摘要和首行安全预览。
  4. 结构化输出:始终给出整体摘要(1 至 3 段)、安全预览(前若干行)、下一步建议,以及分块信息(若发生拆分)。

限制与注意事项:不先运行 estimate_size.py 不得加载文件;不得对未知或大文件使用 cat;不询问“你想让我对这个文件做什么”;不在文件上传后等待用户指示才开始处理;不将超过 30k token 的原始数据加载进上下文。应始终先估算、自动分块超限文件、即使大文件也给出安全预览、检测到数据文件立即行动。资料未提供脚本的具体实现、依赖安装方式与官方文档地址。