龙虾终于长出手脚！OpenClaw Peekaboo v3 让 AI 替你操作 Mac 桌面

导语：OpenClaw 的 Peekaboo v3 终于让 AI Agent 长出了“眼睛”和“手脚”，不仅能看见 Mac 屏幕上的每个像素，还能像真人一样点击、输入、拖拽，彻底告别 Agent “光说不练”的尴尬。

沉寂许久的 OpenClaw 突然又搞了个大新闻——Peter 带着全新的 Computer Use 工具 Peekaboo v3 杀回来了。如果说之前的 AI Agent 只能帮你“指手画脚”，那现在这只龙虾算是真正长出了能干活儿的“手”和“脚”。

过去我们在用 Agent 类产品时，总有一个跨不过去的坎：它可以打开网页、跑个流程，但一涉及到屏幕上的具体操作——比如点那个按钮、拖那个文件、把文字敲进输入框——它就立刻“装瞎”，最后还得我们自己上手。Peter 显然早就看不下去，于是 Peekaboo v3 直接把这道墙给凿穿了：让 Agent 真的能看见屏幕，真的能操控鼠标键盘，从发号施令的甲方，变成了下场干活的乙方。

眼睛＋手脚，Peekaboo v3 到底强在哪？

Peekaboo（躲猫猫）其实不是新东西，早在去年 11 月 Peter 就开始折腾，陆续憋了 beta1 到 beta4 好几个测试版，磨了近半年。最近大概是觉得再不出点动静大伙儿就把龙虾忘了，于是开启狂更模式，v3.1.0、v3.1.1、v3.1.2 接连放出。

简单来说，Peekaboo v3 就是给你的 Mac 装了一套带有“眼睛”和“手”的工具包，能让 AI Agent 看到屏幕上的每一个像素，也能像真人一样操控鼠标键盘。

“看”的能力：像素级截图 + UI 元素读取

Peekaboo v3 不仅能对窗口、全屏、菜单栏进行像素级截图，还能读取 macOS 上每一个 UI 元素的位置、类型、标签（label）等信息。这意味着 Agent 不再是对着一块黑盒屏幕瞎猜，而是真的知道每个按钮在哪、每个文本框是谁，堪称“慧眼识屏”。

“动”的能力：一套完整的真人操作模拟

在操控方面，Peekaboo v3 几乎覆盖了人类使用 Mac 时会做的所有事情：点击、输入文字、按快捷键、滚动、拖拽、切换窗口、切换桌面（Space）、点 Dock 栏、处理系统弹窗……以前你需要亲手做的事，现在它自己就能搞定。

一位网友直接用 Peekaboo v3 做了个“Computer Use”烟雾测试：让 Hermes 操作计算器、Peekaboo 读取屏幕结果、Python 独立验证答案，整个过程一气呵成，顺利通关。这位网友已经立下 flag，下一步要让 Peekaboo 自动翻找以前写过的邮件，玩得不亦乐乎。

不止单兵作战，还能融入 AI 生态

光有眼睛和手脚还不够，Peekaboo v3 真正让人兴奋的是它的集成能力。首先，它支持自然语言 Agent 模式，我们在提示词里直接用大白话甩任务就行，无需复杂的编程指令。其次，它能把所有能力打包成 MCP（Model Context Protocol），喂给你常用的 AI 工具。

举个例子，当你在 Cursor 里写代码，跑起来后 UI 出了 bug，以前你得自己截屏发给 Cursor 让它看。现在不用了——Cursor 自己就能调起 Peekaboo 截图、自己看、自己改代码、自己再跑一遍验证。全程无需你插手，真正的“自动化修 bug”。

四种方式，总有一款适合你

为了让不同需求的用户都能用上，Peekaboo 提供了四种“打开方式”：

• Homebrew 一键安装：适合想写脚本自动化干活的朋友，命令行搞定。
• MCP server 模式：日常使用 Claude Code、Cursor、Codex 等 AI 编程工具的开发者，直接把 Peekaboo 作为 MCP server 接入，体验最丝滑。
• Mac 桌面 App：普通 Mac 用户不想碰命令行，去 GitHub Releases 下载桌面版即可，可视化的权限管理和交互反馈非常友好。
• Swift 包：Swift 开发者可以直接将 Peekaboo 能力嵌入自己的 App 中。

如果你本身是 OpenClaw 用户，那就更简单了——直接通过 Skill 安装，相当于给龙虾装了个操作 Mac 的插件，录屏、辅助功能等系统权限统一走 OpenClaw，无需额外配置。

为什么 Peter 这么急？

Peter 这波密集更新其实不难理解。这两年，Anthropic 的 Computer Use、OpenAI 的 Operator，以及各种 browser-use 工具都在卷“AI 操作电脑”这条路。开源 Agent 领域更是热得发烫，Computer Use 的替代方案层出不穷。他必须快，才能避免被后来者追上，也算是给自己在 OpenAI 的 Agent 工作提供一个最强的本地验证平台。这套“内外兼修”的打法，确实妙得很。

Peekaboo v3 相关链接：

官网：https://peekaboo.sh/
GitHub：https://github.com/openclaw/Peekaboo
Twitter 讨论：https://x.com/search?q=Peekaboo&src=typed_query