SuperAPI AI 工具集

s4h-probability-confidence-calibration

测试与质量

查看项目

更新于 10-15 22:15

技能介绍

用途:核验某具体主张所声明的置信水平是否与可用证据相称,纠正过度自信(如自称90%把握实际远低于此)和过度不自信(证据已足却过度含糊、无法行动)。目标是让置信度准确,而非一律调低。

主要能力与流程:

  1. 陈述主张与当前置信度:要求具体、可证伪的陈述及其百分比置信度,并先做框架确认。
  2. 审计支持证据:把每条证据分类为直接观察、推断、轶事或假设。
  3. 列出反证与缺口:包括若主张为真本应看到却未看到的现象,以及尚未核查的相关因素。
  4. 识别最可能的失败模式:若主张错误,最可能原因是什么,当前是否被适当加权。
  5. 应用频率检验:在此置信水平下,大量类似判断中正确的比例是否合理。
  6. 给出校准置信度:说明调整方向(上调/下调/不变)与一句理由。

使用方式:过程中会用 AskUserQuestion 工具做“框架确认”和“范围选择”(完整分析、仅关键结论、仅标记失准、重新界定),并按用户选择推进。输出格式包含主张、原置信度、证据质量审计(证据/类型/强度)、反证与缺口、最可能失败模式、校准置信度及说明。

适用场景:个人判断校准、决策前评估、概率性主张的置信度审查。

限制:本资料未提供平台要求、安装命令、收费或价格信息;未说明依赖的具体模型或环境;结尾列出的后续技能(如场景加权、事前验尸分析、可逆性分析)为可选衔接项,其内容未在本资料中展开。