用途:作为聊天机器人质量分析师,审查近期 AI 聊天对话,发现糟糕回答、遗漏问题和改进机会。
主要能力:通过 composio 工具发现并拉取对话日志,逐条评估机器人是否回答问题(已解决/部分解决/失败)、回答是否准确(正确/错误/幻觉)、用户是否需转人工、用户情绪(满意/沮丧/放弃),最后输出 QA 报告,包含性能摘要、失败对话表格、未回答主题排行、幻觉警报和改进建议。
使用方式:在 Bash 中运行 composio search 查找工具,例如 composio search "get chatbot conversation logs from Botsonic" "list chatbot interactions from Docsbot" "get Landbot conversation history";再用 composio execute <LIST_CONVERSATIONS_SLUG> -d '{...limit 50...}' 拉取最近 50 条对话。若 CLI 提示工具包未连接,需让用户运行 composio link <toolkit> 后重试。
适用场景:客服机器人质量巡检、知识库缺口分析、幻觉检测、转人工策略优化。
限制:依赖 Botsonic、Docsbot、Landbot 等已连接工具包;具体平台支持范围、收费与效果暂未提供。