SuperAPI AI 工具集

cekura-eval-design

测试与质量

查看项目

更新于 10-16 05:02

技能介绍

用途:创建与改进 Cekura 评估器(测试场景),用于检验 AI 语音或聊天智能体。评估器模拟来电者,不是指标(指标事后为对话记录打分)。

主要概念:主智能体为被测对象;测试智能体为 Cekura 模拟的来电者;评估器/场景即一个测试用例;人格决定测试智能体的声音、语言与说话行为;测试 профиль 提供运行所需的身份与上下文数据;条件动作(CA)是逐轮脚本化的测试智能体行为。

使用方式:先读取被测智能体的完整记录(含描述、语言、连接与 mock_tools 等),并列出其已有评估器,避免重复。确定模式与写入路径:行为式用 scenario_type "instruction"(开放式、探索式、语气与同理心等);条件动作用 "conditional_actions"(逐字合规措辞、固定序列回归、IVR/DTMF、打断/静音/网络、基础设施与 CI 测试等)。生成是通用写入路径,适合批量与类别级请求;直接创建仅用于结构完全已知的条件动作场景。行为式场景从不手写,除用户提供完整逐字载荷。

需要确认时只做一次合并确认,覆盖工具数据策略、数量与覆盖面、模式、文件夹等;不询问人格、指标或标签,采用默认并说明。写入后从响应核对每次写入,说明其证明内容;用户要求时运行,未运行则如实说明。

限制:作者期间被测智能体只读,不应修改其字段。条件或结果断言必须有可指出来源(智能体记录、知识库、mock 工具数据、测试 профиль 或用户本次陈述),来源缺失应询问或说明无法作为通过/失败断言。技能需通过 Cekura 工具(MCP/REST/平台工具)执行,而非描述 API 调用或面板点击。具体工具调用、版本与命令等细节以会话中可用工具描述为准,资料未提供完整代码。