SuperAPI AI 工具集

agent-operator-score

agent-operator-score 是一个本地优先的命令行工具(命令为 aos),用于评估开发者操作 Claude Code、Codex、Grok CLI 等命令行 AI 编程助手的水平。它基于用户本机的会话记录(session transcripts)进行评分,并提供一个受控运行评估套件,该套件配有隐藏验证器。在 review 模式下不调用任何模型,数据也不会离开本地磁盘。该工具面向经常使用 CLI 形态 AI 编程助手、希望量化并改进自身使用习惯的用户。

访问官网

工具介绍

用途

agent-operator-score 是一个本地优先的命令行工具,主要用于评估开发者使用命令行 AI 编程助手的能力。根据现有资料,其评估对象包括 Claude Code、Codex 和 Grok CLI 等 CLI 形态的 AI 编程工具。

主要能力

  1. 会话记录评分:工具会读取用户本机已有的会话记录(session transcripts),据此对开发者的操作水平进行打分。
  2. 受控运行评估套件:除直接评分外,还提供一套受控运行的评估套件,该套件配有隐藏验证器(hidden verifier)。

使用方式

通过命令行界面使用,命令为 aos。该工具为 CLI 形态,从本地会话记录中获取数据。

隐私与运行特性

  • 本地优先:在 review 模式下不会进行任何模型调用,数据不会离开用户本地磁盘。
  • 工具本身不包含远程数据上传行为的相关说明,现有资料仅强调 review 模式下的本地特性。

适用场景

适合经常使用 Claude Code、Codex、Grok CLI 等命令行 AI 编程助手的开发者,用于量化自身与这些工具的协作效果,并借助受控评估套件进行更严格的考察。

限制与暂未提供的信息

  • 具体评分维度、评分算法与分值含义,资料未提供。
  • 受控运行评估套件的具体使用步骤、隐藏验证器的判定逻辑,资料未提供。
  • 支持的平台、安装方式、依赖环境与许可协议,资料未提供。
  • 是否收费、定价方案,资料未提供。
  • 除 Claude Code、Codex、Grok CLI 外是否支持其他 CLI 工具,资料未提供。