據 1M AI News 監測,開源開發者 Tommaso De Rossi 發布桌面自動化命令行工具 usecomputer,用 Zig 編寫原生二進制文件,不依賴 Node.js 運行時,讓 AI 編程助手(Claude Code、Codex、OpenCode 等)直接控制桌面的鼠標、鍵盤和截圖。支持 macOS 和 Linux(X11,Wayland 通過 XWayland 兼容)。
usecomputer 提供截圖、鼠標移動/點擊/拖拽/滾動、鍵盤輸入和快捷鍵合成等 CLI 命令,附帶坐標映射系統(coord-map),將截圖中的像素坐標自動轉換為實際螢幕坐標。截圖輸出預設將最長邊縮放至 1568 像素以適配模型上下文視窗。工具還支持 Kitty Graphics Protocol,設置環境變數後截圖可直接內聯到模型上下文中,無需額外讀取檔案。
De Rossi 此前開發了瀏覽器自動化工具 Playwriter(3200+ GitHub 星標),usecomputer 從瀏覽器自動化延伸到桌面自動化。專案從其 kimaki 單倉庫中獨立拆出,同時提供 CLI 和 Node.js 庫兩種使用方式,README 中包含 OpenAI computer tool 和 Anthropic computer use 的完整整合範例。