SuperAPI AI 工具集

rag-diagnostics-analyst

智能体与模型

查看项目

更新于 10-16 05:44

技能介绍

RAG Diagnostics Analyst 是一个面向检索增强生成(RAG)系统的诊断技能,用途是在系统表现不佳时先定位故障环节,而不是盲目改动整个技术栈。

主要能力:按工作流逐层排查。首先明确端到端任务;然后将检索质量与答案质量分开检查;确认“金标准证据”是否可被检索到;再检查已检索到的证据是否被实际使用;最后区分四类失误:检索缺失(retrieval miss)、选择缺失(selection miss)、依据缺失(grounding miss)与生成缺失(generation miss)。诊断完成后,建议最小范围的针对性修复方案。

使用规则:仅看检索质量不足以判断系统好坏;若答案虽然正确但理由错误,需要明确指出这种情况。

适用场景:检索增强系统效果不达预期、需要判断问题出在检索还是生成时使用。

限制:资料未提供具体安装命令、依赖环境、支持的模型或平台、收费与价格信息,暂未提供相关细节。