用途:当你测量到一个数字(加速比、性能回退、吞吐、延迟或评测结果)并准备信任、汇报或据此行动时,先使用本技能解释这个数字意味着什么。核心提问是“为什么不是翻倍”,要求指出限制结果的具体资源或代码路径,例如某个核、锁、磁盘、网络,或负载生成器本身。
主要能力:找到限制项,需来自性能分析或运行期间的系统计数器,并映射到源码;仅凭阅读代码猜测不算限制项。列出这个数字还可能度量了哪些东西,并用证据逐一排除,常见可疑项包括错误、被跳过或缓存的工作、从未运行的代码、未调优的一端(仍为默认设置)、噪声,以及端到端无关紧要的小部分。把证据与数字放在一起,在备注或链接的产物中保存运行次数、离散程度和限制项。
使用方式:对性能数字,按 benchmark-checklist 技能运行完整流程;对评测结果,对每次试验提出同样的问题:是否每次都完成了任务,差距是否在多次试验和多个模型间保持,场景是否有影响。
适用场景:性能回归分析、加速比验证、吞吐与延迟测量、评测结果解读。
限制与判据:当数字背后的证据没有运行次数、没有离散程度、没有具名限制项,或节省的时间大于被改动部分原本花费的时间时,说明你跳过了本技能。本技能不同于 Prove It Works,后者检查输出是否真实。其余信息暂未提供。