OpenClaw专属工具Peekaboo v3回归高频更新,让AI从会聊天到会干活!

OpenClaw的专属Computer Use工具Peekaboo v3正式回归,发布后开启高频更新模式。它补上了OpenClaw最缺的一环,让AI不仅能回消息,还具备看屏幕、点按钮、操作真实桌面的能力,仿佛让OpenClaw长出了眼和手。

热度先升后稳,老问题浮现

过去几个月,OpenClaw热度先升后稳。项目启动,用户开始使用,讨论焦点从"这是什么"转变为"它还能做什么"。此时,一个老问题再度浮现:AI能接消息、理解指令、调用工具,下一步需与真实世界交互。桌面的各种元素才是多数工作的关键,而只能在聊天框提建议的Agent,就像坐在副驾驶指路却无法操控方向盘。Peekaboo就在这时回归,其名字俏皮,寓意电脑界面如同在和自动化玩躲猫猫,而它要为AI补上可靠的"眼睛"和"手"。

从停更到一日三更

从停更到一日三更,Peekaboo去年年末发布v3.0.0 - beta 3后停更,Peter将精力转向OpenClaw。毕竟OpenClaw涉及诸多方面,要连接消息平台、搭建网关、处理本地运行、支撑Agent调度,还要确保普通用户能顺利使用。因此Peekaboo暂时退居幕后。但最近两周情况改变,v3.0.0 - beta 4先发布,前天正式版v3.0.0登场,正式版发布后更新节奏加快,今天一日三更,推出v3.1.0、v3.1.1、v3.1.2。这种高频更新通常有两种原因:一是出现重大Bug,维护者紧急修复;二是方向明确,长期积累得以释放。Peekaboo此次更符合后者情况。过去几个月,OpenClaw搭建好渠道、网关、Agent的框架,现在开始补齐关键环节。

Peekaboo到底在补什么

Peekaboo到底在补什么?对普通用户而言,它是一套macOS自动化工具,能完成截图、识别窗口、读取UI元素、查找按钮、点击、打字、滚动、切换应用、操作菜单等操作。传统脚本易受环境变化影响,Agent操作也容易出错,而Peekaboo的价值在于将桌面转化为Agent可理解的工作场景,它不仅提供截图,还整理图中元素关系,形成可追踪、复盘和继续操作的记录,让AI看到带结构的桌面地图,就像给会读菜谱的人配备厨房工具,使其具备实操可能。

为什么现在才变得关键

为什么现在才变得关键?Peekaboo并非新工具,去年6月就已上线初版,但当时模型能力不足。视觉模型看图能力不稳定,Computer - Use操作也不熟练。近期,模型视觉和Computer - Use能力有了质的提升,Agent接近可持续运行状态,此时底层自动化工具的价值凸显。没有Peekaboo这样的工具,AI对桌面的理解只能停留在截图问答层面,而Peekaboo能将"看见"和"动手"连接起来。

OpenClaw为什么需要它

OpenClaw为什么需要它?OpenClaw最初的亮点是将Agent融入多种消息渠道,用户可从Telegram、Slack、iMessage、WhatsApp等入口发起任务,这解决了用户不想频繁打开新网页和切换工具的问题。但聊天窗口只是入口,实际工作场景多在电脑中。若没有能操作屏幕的本地层,OpenClaw即便接到任务、Agent想出步骤,最终还是要将任务交回给用户,这就失去了助手的意义。Peekaboo接入后,OpenClaw角色转变,有机会成为能在本机环境办事的系统。简单来说,OpenClaw负责处理"谁来找我""要做什么""交给哪个Agent",Peekaboo负责解决"屏幕上有什么""按钮在哪里""如何操作"的问题。

开发工具,潜力巨大

开发工具,潜力巨大。社区中有人用Peekaboo在浏览器里驱动远程iOS模拟器。先让Peekaboo分析移动应用截图,识别出页面元素,然后注册屏幕、点击按钮、等待界面变化、继续截图探索。这一过程关键在于展示了Agent从看懂图到执行操作的完整流程,每一步都可能出错但也能被记录,这是Agent从玩具迈向工具的标志。Peekaboo让这些操作可观察、复盘和继续,为OpenClaw的远程指令和本地执行搭建了桥梁。

Peter忙着更新些什么

Peter忙着更新些什么?这几天的更新看似工程琐碎,如模型目录、工具schema、打包产物、版本标记、捕获路径、daemon调度等,但这些是Agent产品稳定运行的基础。AI工具常出现演示顺畅但用户使用时问题频发的情况,Peekaboo的更新就是为了解决这类问题,减少不同组件间的摩擦,让操作更可预期。好工具的理想状态是让用户感受不到它的存在,Peekaboo正朝着这个方向努力。

它让OpenClaw从会聊天变成会干活

它让OpenClaw从会聊天变成会干活。OpenClaw过去解决的是连接问题,Peekaboo解决的是执行问题。两者结合,才更接近普通人理想中的AI助手。有了Peekaboo,OpenClaw更像值班工程师,能完成各种操作,让用户愿意托付任务。这就是Peekaboo对OpenClaw的重要意义,它推动OpenClaw从消息系统向操作系统边缘迈进,未来可能成为AI操作个人电脑和工作流的本地控制层。

Logo

小龙虾开发者社区是 CSDN 旗下专注 OpenClaw 生态的官方阵地,聚焦技能开发、插件实践与部署教程,为开发者提供可直接落地的方案、工具与交流平台,助力高效构建与落地 AI 应用

更多推荐