加密知识一站通
行情·工具·策略

让AI编程助手直接操控桌面:Zig原生CLI工具usecomputer开源,兼容Claude Code和Codex

1M AI News 监测,开源开发者 Tommaso De Rossi 发布桌面自动化命令行工具 usecomputer,用 Zig 编写原生二进制文件,不依赖 Node.js 运行时,让 AI 编程助手(Claude Code、Codex、OpenCode 等)直接控制桌面的鼠标、键盘和截图。支持 macOS 和 Linux(X11,Wayland 通过 XWayland 兼容)。

usecomputer 提供截图、鼠标移动/点击/拖拽/滚动、键盘输入和快捷键合成等 CLI 命令,附带坐标映射系统(coord-map),将截图中的像素坐标自动转换为实际屏幕坐标。截图输出默认将最长边缩放至 1568 像素以适配模型上下文窗口。工具还支持 Kitty Graphics Protocol,设置环境变量后截图可直接内联到模型上下文中,无需额外读取文件。

De Rossi 此前开发了浏览器自动化工具 Playwriter(3200+ GitHub 星标),usecomputer 从浏览器自动化延伸到桌面自动化。项目从其 kimaki 单仓库中独立拆出,同时提供 CLI 和 Node.js 库两种使用方式,README 中包含 OpenAI computer tool 和 Anthropic computer use 的完整集成示例。

赞(0)
未经允许不得转载:币须知道 » 让AI编程助手直接操控桌面:Zig原生CLI工具usecomputer开源,兼容Claude Code和Codex

评论 抢沙发

  • 昵称 (必填)
  • 邮箱 (必填)
  • 网址