SuperAPI AI 工具集

decoupling-skeleton-flesh-multimodal

设计与创作

查看项目

更新于 10-16 01:34

技能介绍

用途:让模型对表格图像或结构化表格进行问答、比较、汇总、计算,以及把表格图像转为 JSON、CSV、DataFrame 等格式,重点解决复杂布局下值读对但归属行列出错的问题。

主要能力:将理解拆为两步。DiSCo 阶段先做结构抽象(骨架),识别行列边界、表头层级、合并跨度与单元格网格坐标,输出保留表头与合并信息但值留空的模板;再做语义落地(血肉),在全局层概括每行每列的语义角色与单位、时间范围,在局部层把具体值绑定到(行,列)坐标。Table-GLS 阶段按三步推理:全局结构探索(GSE)确定相关行列并形成检索计划;自省式子表抽取(SSE)复核并修订计划,抽出仅含证据的最小小子表;证据落地推理(EGR)只基于该子表逐步作答,每步引用具体坐标。

使用方式:接收表格图像或 HTML/Markdown/CSV 等结构化输入;先抽取骨架坐标网格,不读值;再做全局语义标注与局部内容绑定,并抽查绑定是否与表头一致;解析问题后输出结构化计划,自检修订,抽取最小子表,最后仅据此推理并给出答案与证据子表。图像模糊时标注不确定单元格与置信度;表格旋转偏移需先说明朝向。

适用场景:表格图像问答、跨单元格比较与计算、复杂表头(合并单元格、多级表头、层级行标签)表格、表格图像转结构化数据、表格 QA 流水线。

限制:严重退化图像无法恢复不可见信息;50 行/列以上的超大表可能超出上下文,需裁剪或改用结构化输入;不适用于无网格的自由信息图、流程图、桑基图;一张图含多个表格须分别处理;手写表格更易出错。这是提示与推理策略,并非模型微调,不复制论文的 LoRA 训练流程。

参考:Zhu 等(2026)arXiv:2602.03491v1,https://arxiv.org/abs/2602.03491v1 。