Peekaboo 是一个 MCP（Model Context Protocol）服务器，让 Claude、GPT、CodeBuddy 等 AI 智能体可以直接看屏幕、点按钮、打字、拖拽——就像一个人在操控 Mac。

为什么值得关注？因为它解决了 AI Agent 落地最大的障碍：AI 只能读文本，不能操作真实桌面软件。

## 一句话概括

Peekaboo = macOS 的自动化层，通过 MCP 协议暴露 25 个工具给 AI Agent

• 眼睛：像素级截屏 + UI 元素标注 + AI 看图分析

• 手：点击、输入、拖拽、滚动、快捷键、剪贴板

• 管家：应用控制、窗口管理、虚拟桌面、Dock 栏

• 大脑：自然语言驱动多步自动化

## 25 个工具覆盖六大类

视觉感知（see/image/analyze）、鼠标键盘（click/type/hotkey/move/scroll/drag/swipe）、应用控制（app/window/dock/menu/space）、系统交互（dialog/clipboard/paste/list/permissions）、辅助功能（set_value/perform_action）、智能（agent/browser/sleep）。

## 和 AppleScript、Playwright 比强在哪？

AppleScript 只能操控支持 OSA 协议的应用，Playwright 只能操控浏览器。Peekaboo 走的是 macOS Accessibility API，任何应用——ERP 系统、微信、Safari、终端、甚至系统弹窗——都能操控。而且是原生 MCP 协议，AI Agent 开箱即用。

## 一行命令安装

npx @steipete/peekaboo

要求：macOS 15.0+、Node.js 22+，授予屏幕录制和辅助功能权限。

## 百智云联的实践

我们在潮州已将其集成到多个场景：MES 系统 Demo 的 UI 自动化验证、多平台内容发布（小红书/知乎/抖音全平台通吃）、T+ ERP 的界面辅助操作。

Peekaboo 开源 MIT 协议，GitHub 搜索 steipete/peekaboo 即可。

潮州做AI找百智云联

潮州陶瓷MES ERP 软件服务商 · 用友泛微移动战略合作伙伴