SuperAPI AI 工具集

yutori-computer-use

通用与其它

查看项目

更新于 10-16 03:35

技能介绍

用途:在本地 Mac 上运行桌面任务,例如操作 macOS 应用、本地浏览器中的网站或跨应用工作流。默认后台模式,用户可继续工作,模型自动选择并切换应用窗口;显式前台模式支持可见的桌面控制。

主要能力:通过 CLI 或 MCP 工具运行任务,可指定应用、起始 URL、运行分钟数与最大步数;支持后台与前台模式,后台模式仅捕获目标窗口,菜单栏项可查看最新画面、Show activity 与 Stop(⇧⌘Esc)。

使用方式:首次需在真实终端运行 uvx yutori-mcp login 与 uvx yutori-mcp computer-use setup;用 uvx yutori-mcp computer-use doctor 复查,用 uvx yutori-mcp computer-use smoke 做冒烟测试。运行任务示例:uvx yutori-mcp computer-use run "$ARGUMENTS" --minutes 9 --max-steps 60;指定应用:uvx yutori-mcp computer-use run "$ARGUMENTS" --app Safari --start-url https://example.com --minutes 9;停止:uvx yutori-mcp computer-use stop。在 Claude Code 中应通过 Bash 工具运行 CLI 并附加 stdout,不要重定向到文件或调用 MCP run_computer_use_task;其他能显示 MCP 进度通知的宿主可优先用 MCP 工具。

适用场景:单应用任务、浏览器任务、跨应用工作流,以及需要后台运行或前台可见控制的桌面自动化。

限制:需 macOS 15+、Python 3.10+、uvx、具备 computer-use 权限的 Yutori API key、CuaDriver.app / cua-driver==0.30.4,以及屏幕录制与辅助功能权限;可选原生推理覆盖层可能需要 Xcode Command Line Tools。前台模式运行期间用户不应触碰 Mac;后台模式应避免操作目标应用窗口,键盘输入可能无法送达最小化窗口,部分应用(如 Calculator)接受后台点击但不接受后台键入。minutes 需在 1 到 60 之间,max_steps 为正数;长任务需压缩或总结旧截图与工具结果以控制上下文。allow_foreground_fallback 仅用于后台模式且用户接受短暂焦点切换。start_url 仅与 app 一起使用。其他细节暂未提供。