用途
agent-operator-score 是一个本地优先的命令行工具,主要用于评估开发者使用命令行 AI 编程助手的能力。根据现有资料,其评估对象包括 Claude Code、Codex 和 Grok CLI 等 CLI 形态的 AI 编程工具。
主要能力
- 会话记录评分:工具会读取用户本机已有的会话记录(session transcripts),据此对开发者的操作水平进行打分。
- 受控运行评估套件:除直接评分外,还提供一套受控运行的评估套件,该套件配有隐藏验证器(hidden verifier)。
使用方式
通过命令行界面使用,命令为 aos。该工具为 CLI 形态,从本地会话记录中获取数据。
隐私与运行特性
- 本地优先:在 review 模式下不会进行任何模型调用,数据不会离开用户本地磁盘。
- 工具本身不包含远程数据上传行为的相关说明,现有资料仅强调 review 模式下的本地特性。
适用场景
适合经常使用 Claude Code、Codex、Grok CLI 等命令行 AI 编程助手的开发者,用于量化自身与这些工具的协作效果,并借助受控评估套件进行更严格的考察。
限制与暂未提供的信息
- 具体评分维度、评分算法与分值含义,资料未提供。
- 受控运行评估套件的具体使用步骤、隐藏验证器的判定逻辑,资料未提供。
- 支持的平台、安装方式、依赖环境与许可协议,资料未提供。
- 是否收费、定价方案,资料未提供。
- 除 Claude Code、Codex、Grok CLI 外是否支持其他 CLI 工具,资料未提供。