OpenClaw新版发布 龙虾机器人实现仿生肢体升级
虽然OpenClaw的更新动态已非唯一焦点,但其生态内一款关键工具的进化,正将智能体的能力边界实质性地向前推进。这次突破的核心在于,著名的“龙虾”智能体如今真正具备了操控现实世界的“手脚”。 这一变革源于其创造者Peter带来的全新Computer Use工具——Peekaboo v3。该版本精准解
虽然OpenClaw的更新动态已非唯一焦点,但其生态内一款关键工具的进化,正将智能体的能力边界实质性地向前推进。这次突破的核心在于,著名的“龙虾”智能体如今真正具备了操控现实世界的“手脚”。
这一变革源于其创造者Peter带来的全新Computer Use工具——Peekaboo v3。该版本精准解决了过去Agent类产品的核心痛点:它们通常只能执行预设流程,却无法直接与电脑桌面进行交互。Peekaboo v3的出现,可谓一举攻克了这道长期存在的技术难关。
具体而言,Peekaboo v3在macOS上实现了两项根本能力。首先是“视觉感知”:它不仅能进行像素级屏幕截图,还能精准识别屏幕上每个UI元素的位置、类型和标签信息。其次是“物理操控”:点击、文字输入、快捷键、滚动、拖拽、切换窗口与桌面等近乎所有人类用户能执行的操作,它现在都能代为完成。
已有开发者进行了快速验证测试:让Hermes模型操作计算器,Peekaboo读取屏幕结果,再用Python独立验证答案。整个流程一气呵成,顺利通过。测试者兴奋地表示,下一步将尝试让它自动翻查历史邮件。
体验非常有趣,下一步我还要让Peekaboo自动翻找以前写过的邮件!(正在尝鲜中…
至此,视觉与操控能力兼备,这款智能体“龙虾”似乎真正具备了在用户Mac上代为处理日常事务的完整能力。
从“躲猫猫”到“全能手”:Peekaboo的进化之路
事实上,Peekaboo并非横空出世的新品。早在OpenClaw引发广泛关注之前,去年11月左右,Peter就已开始构思为智能体赋予“手脚”。项目历经从v3.0.0-beta1到beta4多个测试版本的打磨,耗时近半年。直到近日,项目突然进入“高速迭代”模式,连续发布了v3.1.0、v3.1.1、v3.1.2等多个版本。
那么,Peekaboo究竟是什么?简而言之,它是一个专为Mac设计的工具包,旨在为AI智能体装上“眼睛”和“手”,使其能够“看到”屏幕内容并操作鼠标键盘。
许多体验过早期智能体产品的用户可能都有同感:Agent能帮你打开网页或启动某个流程,但一旦需要与屏幕上的具体元素交互——比如点击某个特定按钮、将文件拖入指定区域、或在某个输入框内键入文字——它便无能为力,最后一步仍需人工手动完成。
Peekaboo v3正是为了打破这“最后一公里”的障碍而生。它让智能体从只能“指手画脚”的指挥者,转变为能够“亲自动手”的执行者。
除了基础的“看”与“动”,Peekaboo v3还有两项设计尤为亮眼。其一,它支持自然语言Agent模式,用户可以直接用日常语言下达指令,无需记忆复杂命令。其二,它能将所有能力封装成MCP(Model Context Protocol),无缝集成到各类常用AI工具中。
例如,开发者在使用Cursor编写代码时,如果运行后UI出现错误,以往需要手动截图、发送给Cursor分析。而现在,Cursor可以自行截图、分析问题、修改代码并重新运行验证,实现真正的闭环处理,全程无需人工干预。
这种设计极大地扩展了其应用场景,使其能力可以像蜘蛛网一样,连接并赋能多个不同的产品。
四种路径:如何将Peekaboo v3融入你的工作流
考虑到不同用户群体的技术背景和使用习惯,Peekaboo v3贴心地提供了四种不同的“打开方式”,总有一款适合你。
方式一:命令行脚本爱好者
如果你习惯通过编写脚本实现自动化,那么通过Homebrew安装是最直接的选择:
brew install steipete/tap/peekaboo
peekaboo --version
方式二:AI编程工具重度用户
对于日常使用Claude Code、Cursor、Codeium等AI编程工具的开发者而言,最便捷的方式是将Peekaboo作为MCP服务器接入:
npx -y @steipete/peekaboo mcp
方式三:追求便捷的普通Mac用户
如果不愿接触命令行,可以直接从GitHub Releases页面下载Mac桌面版应用程序。该版本提供可视化反馈和图形化的权限管理界面,对用户非常友好。
方式四:Swift应用开发者
如果你想将这套能力嵌入到自己开发的macOS应用中,只需通过Swift Package Manager引入相应的库即可。
此外,对于希望在OpenClaw中直接使用其能力的用户,可以将其添加为一项“Skill”。这相当于为智能体安装了一个操作Mac的插件,并且相关权限可以通过OpenClaw一次性统一管理,无需再为Peekaboo单独配置。
纵观近两年的技术趋势,从Anthropic的Computer Use、OpenAI的Operator,到各类browser-use工具,让AI直接操作电脑已成为明确的竞争赛道。随着开源智能体生态的日益活跃,各种Computer Use的替代方案正在不断涌现。Peter此次的密集更新,或许正是为了巩固先发优势,同时为其在更广阔领域的Agent工作提供一个强大的本地验证平台。这套“内外兼修”的策略,无疑为其在激烈的AI智能体竞争中增添了重要筹码。
对于感兴趣的技术爱好者与开发者,可以通过以下链接获取Peekaboo v3的更多信息并进行尝试:
[1]https://peekaboo.sh/
[2]https://github.com/openclaw/Peekaboo
[3]https://x.com/search?q=Peekaboo&src=typed_query
游乐网为非赢利性网站,所展示的游戏/软件/文章内容均来自于互联网或第三方用户上传分享,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系youleyoucom@outlook.com。
同类文章
特斯拉开发Grok语音控制FSD,实现对话式自动驾驶
7月12日,一则引人关注的消息传来:与汽车进行语音交互的方式,正从“发出指令”转变为“像与驾驶员聊天”一样自然。 特斯拉将人工智能融入汽车的计划,即将迎来新的突破——让Grok聊天机器人与FSD自动驾驶系统实现深度整合。AI不仅能与用户进行自然对话,还能直接操控车辆行驶。 事情的起因是这样的。近日,
MiniMax闫俊杰放弃薪酬 5%股份激励团队和开源
MiniMax创始人闫俊杰宣布即日起不再领取薪酬,并拿出个人名下5%股份:4%用于激励团队,1%设立基金支持开源社区。此前公司因大规模限售股解禁股价大跌20%,但大股东无减持计划,创始团队已设12个月自愿禁售期。
小米首款SUV命名SkyNomad N90揭晓
小米澎程首款SUV命名为SkyNomadN90,采用全新十字大灯、封闭式前脸设计,该车定位智能可变大空间SUV,可切换为工作室、卧室等多种移动生活空间,内部研发代号为昆仑,提供五座和七座版本,并标配激光雷达系统。
Redmi Note 17 7英寸大屏8000mAh电池追剧神器
红米Note17将于7月14日发布,配备7英寸大屏与8000mAh电池,定位千元价位。大屏视野开阔,观影沉浸感强;大电池续航持久,弥补短板;延续Note系列耐用特质,填补千元大屏市场空白。
马斯克承认看错Anthropic 不会因竞争断其服务器
马斯克公开承认看走眼,称Anthropic现为AI领域领导者,驳斥“拔服务器”的竞争手段。SpaceX向Anthropic出租算力,双方合作紧密。马斯克强调不会因竞争切断服务,认可其模型实力,体现技术与商业并行的底线。
- 热门数据榜
相关攻略
2026-07-12 13:49
2026-07-12 13:48
2026-07-12 13:48
2026-07-12 13:48
2026-07-12 13:48
2026-07-12 13:48
2026-07-12 13:48
2026-07-12 13:48
热门教程
- 游戏攻略
- 安卓教程
- 苹果教程
- 电脑教程

