用途:computer-use 是 Orca 提供的一项技能,用于通过 orca computer 命令驱动本地可见应用窗口的图形界面,覆盖无障碍树、点击、输入、菜单、对话框以及原生应用截图等操作。
主要能力:可对原生应用的 GUI 进行交互,包括读取无障碍树、执行点击与键盘输入、操作菜单和对话框,并获取截图。
使用方式:该技能是一个发现入口,会加载与当前会话所用 Orca 可执行文件版本匹配的指南。使用前需先确定本会话的 CLI:若设置了 ORCA_CLI_COMMAND 环境变量则使用其值(Orca 会为受管 WSL 会话导出该变量);否则在暴露 ORCA_DEV_REPO_ROOT 的开发检出中使用 orca-dev;否则在非 Orca 受管终端的 Linux 上使用 orca-ide,切勿直接运行裸 orca,因为在 Orca 终端之外它通常解析为 GNOME Orca 屏幕阅读器(/usr/bin/orca)并会在用户机器上启动语音;其余情况使用 orca。文中 ORCA 为占位符,运行前需替换,不要创建 shell 变量或直接运行 ORCA。运行 Orca 命令前先加载版本匹配的指南:ORCA skills get computer-use。优先使用 --json;指南未覆盖的命令或标志可查看所选可执行文件的 --help。若命令提示 Orca 未运行,用 ORCA open --json 启动后重试。若报 runtime_access_denied,说明沙箱阻止了连接,需以提升权限重新运行,且不要运行 ORCA open 或重启 Orca。若 skills get 未知,说明更新 Orca 可恢复该指南;只读发现请用 --help,不要猜测不支持的命令。
限制:所选可执行文件无法运行时,应报告其确切错误并停止,不要回退到其他可执行文件,以免静默指向不同的 Orca 构建。其他细节暂未提供。