在 Windows Sandbox 中运行 Minecraft,供 Computer Use Agents 使用

CUA.ai 发布了一份技术指南,演示如何在 Windows 沙箱中安装并运行《Minecraft:Java 版》,再通过 MCP 服务器让 AI 代理像人类一样用鼠标键盘操作游戏。这为“计算机使用代理”提供了一个可复现、高难度的测试环境。

一句话看懂:CUA.ai 发布了一份技术指南,演示如何在 Windows 沙箱中安装并运行《Minecraft:Java 版》,再通过 MCP 服务器让 AI 代理像人类一样用鼠标键盘操作游戏。这为“计算机使用代理”提供了一个可复现、高难度的测试环境。

事件核心:发生了什么

CUA.ai 在其官方文档中新增了《在 Windows 沙箱中运行 Minecraft》指南,面向构建 Computer Use Agents 的开发者。该指南展示了如何启动一个 Windows Server 2022 沙箱,安装 Minecraft Java Edition,并通过运行在沙箱内的 cua-driver MCP 服务器,让 AI 代理接收屏幕画面、发送点击和键盘指令来驱动游戏。整个流程支持两种运行方式:本地 QEMU 裸机虚拟化(需要支持 KVM/HVF 的主机)和 Fleet 云端托管。

技术细节上有几个关键点:沙箱默认网络被隔离,Minecraft 需要联网,因此指南额外添加了第二个非受限网络接口;默认的 QEMU CPU 型号无法支撑软件 OpenGL 驱动,必须附加 -cpu host 参数;Microsoft Basic Display Adapter 仅支持 OpenGL 1.1,而 Minecraft 1.17 以上需要 OpenGL 3.2,因此需安装 Mesa3D 的 opengl32.dll(llvmpipe)软件渲染。安装过程通过 Microsoft 设备授权完成账号登录,需要人工在浏览器中批准一次验证码。

为什么重要

当前的 Computer Use Agent 评测多集中在网页操作或简单桌面任务上,而 Minecraft 提供了一个完全不同的挑战:它要求代理在长时间、无预设脚本的 3D 环境中进行目标导向的探索与操作,涉及实时导航、资源收集、合成物品等复杂决策。同时,游戏对图形渲染、网络通信和 Java 运行时的依赖,几乎覆盖了 Windows 沙箱的全部能力边界,是一个高强度的“压力测试”场景。

从行业角度看,这份指南明确展示了“AI 操作真实软件”的技术链路,即沙箱隔离、GUI 驱动、MCP 协议交互。它把“看屏幕、点鼠标”的通用范式从简单 GUI 应用扩展到了对图形性能有硬性要求的 3D 应用,进一步推动通用型计算机使用代理的评测标准向前演进。

对用户/开发者/创作者的影响

对 AI Agent 开发者而言,这份指南提供了一个可复现的基准测试环境,可用于评估代理在视觉理解、空间推理和长任务规划方面的表现。对游戏 AI 研究者来说,Minecraft 一直是 Meta 等机构使用的“AI 健身房”,本次方案让研究者可以用更标准化的 Windows 环境进行实验。

GamsGo AI

AI 工具推荐

想把多个 AI 模型放在一个入口?

GamsGo AI 集成 ChatGPT、DeepSeek、Gemini、Claude、Midjourney、Veo 等常用模型,适合写作、绘图、视频和日常 AI 工作流。

了解 GamsGo AI

推广链接:通过此链接购买,我可能获得佣金,不影响你的价格。

对普通用户而言,虽然“让 AI 玩 Minecraft”本身是演示性质,但它预示着未来 AI 可以直接操作日常软件——从安装程序到配置环境,再到完成具体任务,无需定制 API 或插件。创作者则可以关注 cua-driver 的 MCP 接口,未来或可将其接入自动化工作流,实现游戏内重复劳动的自动化。

值得关注的后续

第一,CUA.ai 是否会将这套流程封装为更简单的 CLI 命令或托管服务,降低 Agent 开发者的上手门槛。第二,目前方案使用的是软件 OpenGL,性能受限,后续是否有硬件 GPU 直通方案来运行对帧率更敏感的应用。第三,Minecraft 之外,这套沙箱方案能否平滑迁移到其他 3D 应用或游戏引擎,将决定其作为通用评测环境的扩展潜力。目前公开信息显示,该指南刚刚发布,尚未见到第三方复现测试的独立报告。

来源:Hacker News

celebrityanime
celebrityanime
文章: 20274

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注