Vercel Labs发布agent-desktop桌面操作工具
AI 总结
Vercel Labs推出agent-desktop,以CLI和C库形式让AI智能体通过操作系统无障碍树查看并操作macOS、Windows和Linux上的桌面应用。项目文档称,智能体可获取带有可操作引用的JSON,点击或输入后再次检查界面,工具本身不内置模型。文档还警告,快照、剪贴板读取、截图、命令输出和调试产物可能泄露桌面私人内容。
深度见解
agent-desktop为三大桌面平台上的计算机操作智能体提供了模型无关的接口,但相关能力主要来自项目文档,尚无独立测试佐证。
Computer use CLI for AI agents

https://agent-browser.dev/desktop
agent-desktop
Computer use for AI agents: see and operate desktop apps on macOS, Windows, and Linux through the OS accessibility tree.