SuperAPI AI 工具集

agenthog-add-eval

智能体与模型

查看项目

更新于 10-16 06:14

技能介绍

该技能目前为计划状态,尚未编写实现,因此暂未提供可用的安装或使用方式。

用途(计划范围):添加一个评估器,对智能体输出进行评分,并在 AgentHog 仪表盘的追踪上显示该评分。

计划能力:选择评估器模板(幻觉、有用性、格式正确性、自定义 LLM 作为评判者);将评估配置为对传入追踪的抽样运行(例如 10%),或按需对数据集运行;把评估分数作为 agent.eval 事件显示在追踪上;验证分数出现在 AgentHog 的 Evaluators 标签页中。

使用方式、安装命令、配置细节与限制:暂未提供。

进度跟踪地址为 https://github.com/TheAgentOS/agentos-skills/issues。