学习研究了下 amontlabs/lcu 这个项目,它把 Codex 的 Computer Use(让 AI 看屏幕、点鼠标、敲键盘来操作电脑的能力)单独拆了出来,让 Claude Code、Codex CLI、Pi 等其他 AI Agent 工具也能调用。 我本来还以为它是模仿 Codex 实现了一套,原来是直接用的 Codex 的 Computer Use,在本机找到已安装的 ChatGPT 桌面版,启动其中 OpenAI 自带的…

开源项目 amontlabs/lcu 把 Codex 的 Computer Use 能力从 OpenAI 官方运行时中“借”了出来,通过 MCP 转接给 Claude Code、Codex CLI、Pi 等第三方 AI Agent 调用,让任意 Agent 都能看屏幕、点鼠标、敲键盘。

一句话看懂:开源项目 amontlabs/lcu 把 Codex 的 Computer Use 能力从 OpenAI 官方运行时中“借”了出来,通过 MCP 转接给 Claude Code、Codex CLI、Pi 等第三方 AI Agent 调用,让任意 Agent 都能看屏幕、点鼠标、敲键盘。

事件核心:发生了什么

X 用户 @dotey 分享了对开源项目 amontlabs/lcu 的研究。该项目并未模仿 Codex 重写一套 Computer Use 实现,而是直接复用本机已安装的 ChatGPT 桌面版中 OpenAI 自带的 Computer Use 运行时,再通过 MCP(Model Context Protocol)接入其他 Agent 工具。仓库文档明确,指令、执行与权限策略均以 OpenAI 原版为准。

这意味着电脑必须装有官方 ChatGPT 桌面版,但无需登录 ChatGPT 或 Codex 账号。工具接口极简,只提供 js 和 js_reset 两个:模型通过编写 JavaScript 操作预置的 cua 对象,先调 getState() 获取桌面状态与使用说明,再用 getApp 选定窗口,执行点击、输入、按键、截图等操作,且状态跨调用保留。仓库记录显示,macOS 上模型收到的初始化说明与官方 Codex 收到的内容逐字节一致。

目前已正式适配 Pi、Codex CLI 和 Claude Code,Oh My Pi 与 Hermes 为实验性支持。系统要求 Apple Silicon 的 macOS(需辅助功能与屏幕录制权限)或 X11 的 Linux;Windows 11 处于候选阶段,Intel Mac 和 Wayland 暂不支持。控制 Chrome 需额外开启官方扩展,且每个网站须单独批准。

为什么重要

Computer Use 被视为 Codex 最具差异化的能力之一,也是 AI Agent 从“聊天”走向“真正操作电脑”的关键跳板。LCU 以“转接”而非“重造”的方式把它开源出去,实质上把 OpenAI 的桌面操控能力变成了可被任意 Agent 复用的公共基础设施。这既降低了 Claude Code 等竞品补齐桌面操作能力的门槛,也让 Computer Use 的竞争从“谁的模型更强”部分转向“谁能更好地封装与调度”。

同时,LCU 采用 OpenAI 原版接口设计,说明其定位更接近生态适配层,而非独立技术路线。这种“寄生式”集成在短期内推进了 Agent 生态的互操作性,但也带来了对官方运行时的高度依赖。

对用户/开发者/创作者的影响

对开发者而言,只要本机有 ChatGPT 桌面版,就能用几行配置把桌面操控能力接到自己常用的 Agent 中,无需申请额外 API 或账号。JS 代码式接口允许把点击、输入、读取结果写进同一次调用,配合无障碍信息按元素点击,比纯屏幕坐标方案更稳。安装需 Python 3.12 以上,项目建议直接把安装文档提示词贴给 Agent 自动完成配置。

GamsGo AI

AI 工具推荐

想把多个 AI 模型放在一个入口?

GamsGo AI 集成 ChatGPT、DeepSeek、Gemini、Claude、Midjourney、Veo 等常用模型,适合写作、绘图、视频和日常 AI 工作流。

了解 GamsGo AI

推广链接:通过此链接购买,我可能获得佣金,不影响你的价格。

对创作者和普通用户,这扩大了“用 AI 自动化操作本机软件”的可行范围,但公开信息显示权限仍由 OpenAI 原版策略管束,Chrome 站点级审批和白名单 Hook 配置需要自行设置。

值得关注的后续

其一,Windows 11 支持能否从候选转正,以及 Intel Mac、Wayland 是否补齐,决定了可用人群规模。其二,OpenAI 是否会对这种“借用运行时”的做法收紧授权或调整桌面版策略。其三,Claude Code 等 Agent 接入后,跨模型调用 Computer Use 的实际体验和权限管理,是否会催生新的生态规则。

来源:@dotey(项目地址:github.com/amontlabs/lcu)

celebrityanime
celebrityanime
文章: 27493

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注