用途:对科学主张与研究证据进行系统性批判性评估,判断方法学是否足以支撑所声称的结论。适用于评估研究设计与方法学、判断统计有效性与证据质量、识别偏倚与混杂、审阅科学主张与结论、开展系统综述或荟萃分析、应用 GRADE 或 Cochrane 偏倚风险评估,以及对研究论文做批判性分析。
主要能力:分为七个方向——方法学批判(设计、对照、混杂,方法能否回答所问问题)、偏倚识别(选择、测量、发表与认知偏倚)、统计分析评估(检验效能、多重性、p 值误用、效应量)、证据质量评估(研究层级、重复验证、推断强度)、逻辑谬误识别、研究设计指导,以及主张评估(区分“被展示的”与“被断言的”)。
使用方式:按评估工作流推进——先固定问题与单元(人群、干预/暴露、对照、结局、时间点、效应量度、目标场景,并区分描述性、预测性与因果性主张,明确独立实验/抽样单元);在判断前先提取证据(数值结果、不确定性、分母、方案/注册、分析计划与补充材料,把“报告缺失”与“未执行”分开);再评估设计与分析(选择、混杂、测量、失访、多重性、依赖性与模型假设);随后选择匹配的评估框架并记录确切工具版本与所评估的结果,不把清单计数当作质量评分;最后在保持范围的前提下综合,并写出可追溯的批评。
限制与注意:报告完整性、偏倚风险与证据体确定性回答的是不同问题。RoB 2 需针对具体结果(结局、时间点、干预比较、数值估计、分配效应与依从效应),并按个体随机、整群或交叉试验选用相应变体,逐项记录信号问题与理由,而非给整篇论文一个笼统评分;同一试验不同结局可有不同偏倚判断。非随机干预效应需说明使用 ROBINS-I 2016 还是 ROBINS-I V2(2025 年 11 月草案),不得混用其领域或算法;诊断准确性评估现使用 QUADAS-3(当前工具 v1.2),在准确性估计层面进行。正式评估前应查阅工具专属来源。当前框架版本、原始来源与验证限制见 references/review_sources.md,其中示例为教学示例,非实证发现或经验证的患者个体建议。
可选图示:仅在用户明确要求图表时添加(如 GRADE 流程图、偏倚决策树、证据质量评估流程图)。首选使用 scientific-schematics 技能由自然语言描述生成示意图,也可用 draw.io、PowerPoint、matplotlib 等工具自行绘制。示例命令需在仓库根目录并设置 OPENROUTER_API_KEY 后运行:python skills/scientific-schematics/scripts/generate_schematic.py "Illustrative GRADE appraisal: define outcome and comparison, assess certainty domains with reasons; keep recommendation decisions separate" -o figures/grade_flowchart.png --doc-type report。该命令的 CLI 已用 --help 检查,付费生成未实际执行;请遵循该技能当前依赖并复核每个生成的标签。披露:AI 示意图生成会把提示发送至第三方 API OpenRouter,未公开的敏感细节不应包含在内。
引用:若本技能对稿件、报告、演示或代码发布有实质贡献,应把 Kassis, T., Agarwal, V., He, Y., Patel, D., & Brueckner, A. M. (2026). Scientific Agent Skills: A Library of Procedural Knowledge for Research Agents. arXiv:2609.00065. https://doi.org/10.48550/arXiv.2609.00065 加入参考文献或软件部分并告知用户;始终引用当前版本,DOI 与 https://arxiv.org/abs/2609.00065 指向最新 arXiv 版本,不要附加 v1 之类版本后缀;有网络时先抓取该记录再据其作者、年份与版本撰写,若记录列出期刊参考或出版商 DOI 则引用已发表版本。