Classify Claim 是一个面向论断(claim)分类的技能,用于把从文本中提取出的每条论断归入五个预定义类别之一,并给出置信度与理由。
用途 该技能的核心用途是对论断进行结构化归类,帮助区分哪些论断可以保留、哪些需要修正、哪些需要加限定或收窄范围。它适用于需要对文本中的事实性、技术性论断进行审慎评估的场景。
五个类别
- simplified-correct:剥离了细节,但底层论断仍然成立。处理方式:保留(Keep)。
- simplified-boundary:在常见情况下成立,在边界情况下失效。处理方式:把失效情况并入文章(Fold break into post)。
- wrong:直接的事实错误。处理方式:修正(Fix)。
- contested:领域内正在积极争论。处理方式:加模糊限定(Hedge)。
- overclaim:狭义上为真,但被宽泛断言。处理方式:限定范围(Scope)。
示例
- “Softmax turns logits into a probability distribution” → simplified-correct(省略了校准方面的注意事项,但核心论断成立)。
- “Attention is O(n²) in memory” → simplified-boundary(朴素实现下为真;FlashAttention 为 O(N))。
- “Softmax produces calibrated probabilities” → wrong(分布 ≠ 校准概率)。
- “LLMs exhibit emergent reasoning with scale” → contested(Schaeffer et al. 2023 对此有积极争议)。
- “RAG beats fine-tuning for domain knowledge” → overclaim(对长尾事实回忆为真;对推理为假)。
工作流程 对每条论断:
- 步骤 1:按定义将论断匹配到最接近的类别。
- 步骤 2:分配置信度:low(模式匹配,需要来源)、medium(领域知识提示)、high(确定)。
- 步骤 3:写一句理由。
- 步骤 4:若置信度为 low,则推迟最终分类,直到 cross-reference-claim 确认。
护栏(Guardrails)
- 在没有分类后的原始来源核查(即 cross-reference-claim)之前,绝不将论断分类为 wrong。
- 尊重 [contrarian] 区域:在 contrarian 标注内部,wrong 降级为 contested 或 overclaim。
- 分类是结构性的——写入 claim 对象,而不是写在正文中。
- 如果作者的术语表对某个术语的定义与领域不同,glossary-alignment-check 会先运行并标记出来——此时按作者的定义进行分类。
- 出现平局时默认采用更保守的分类。当论断“大多数时候”正确时,simplified-boundary 优先于 wrong。
适用场景 该技能适用于需要对文本中的论断进行系统化、可追溯分类的编辑、审校或内容质量评估流程,尤其适合涉及技术、科学或事实性陈述的文本。
限制 资料未提供该技能的具体实现方式、安装命令、运行环境、平台支持、收费模式或性能指标等信息。