SuperAPI AI 工具集

cursor-benchmark-checklist

通用与其它

查看项目

更新于 10-16 07:14

技能介绍

用途:在产出性能数字(PR 前后对比、回归结论、爬坡实验、库或配置选择)时,用本清单核查该数字是否可信。核心原则是:用运行证据回答每个问题,而不是凭对代码的猜测。

主要能力:包含运行前的准备(写下预期结论、读测量脚本、用 uptime、nproc、sysctl -n hw.logicalcpu 等查看负载与核数)、七项核查问题、以及报告格式。

七项核查:1)找出限速因素(用 top、pidstat、node --cpu-prof、py-spy、perf、strace -c 等,注意别把负载生成器的瓶颈当成被测对象);2)是否已调优(双方须按生产方式运行:release 构建、生产标志与环境、批处理与事务设置、连接池、缓存冷热一致、版本与数据相同);3)是否突破物理极限(用算术对比磁盘/网络带宽与核数,去掉只占 10% 的环节最多快约 11%);4)是否出错(统计失败与非成功响应,并检查输出正确);5)是否可复现(每侧至少 5 次并交替运行,报告中位数与范围,差距小于波动视为无可测差异);6)是否有意义(测端到端路径与微基准占比);7)工作是否真的发生(确认耗时区间内请求到达、行被写入、结果被使用,警惕懒执行与超时)。

使用方式:每个问题用一次运行的证据作答。用户只要粗略估算时,一次运行即可,但仍须检查第 4、7 项并注明仅一次运行;选项之间的取舍绝不接受粗略估算。

报告要点:先给结论(更快、更慢、无可测差异、不确定),给出带单位的数字、运行次数、范围与限速因素;无法命名限速因素、某侧未调优、或无法检查第 4、7 项时应称结论不确定。PR 正文只放一个主数字,其余证据放链接产物或笔记。

限制:本资料未提供具体安装命令、收费或平台信息。