Meta推出XR Operator实验工具，AI智能体自主完成VR应用自动化测试

当地时间 8 月 19 日，Meta 在开发者博客详细介绍了旗下 VR 开发辅助工具 Meta XR Operator。

该工具 7 月 28 日随 Meta XR SDK v205 以实验性功能对外放出，借助 MCP 模型上下文协议对接各类 AI 智能体，让 AI 具备观察、操作、校验 VR 程序的能力，打造出 “编码运行排错验证” 的自动化闭环开发流程。

现阶段 AI 编程助手已经可以完成代码生成、静态测试与漏洞修复，但在 VR 开发场景存在明显短板。AI 无法直观看到虚拟应用画面，也不能执行空间层级交互，很难判断代码修改之后实际运行效果。

Meta XR Operator 正是为补齐该痛点而设计。它部署在应用与 OpenXR 运行时中间层，拦截运行时调用，在不需要改动项目源代码的前提下，向 AI Agent 开放 XR 运行状态和输入控制权限。

依托这套工具，AI 智能体可以实现多项实操能力：抓取模拟器内应用截图完成视觉观测；读取房间几何数据掌握空间环境；模拟手柄按键、摇杆、扳机以及头部姿态变化；读取 Unity 场景组件信息，同时自动执行点击按钮、菜单跳转等 UI 多步骤测试。

Meta 规划了三大典型工作流。开发者使用自然语言提出需求，AI 自动完成编码、部署、模拟运行与迭代优化；调试阶段 AI 能够复现故障，定位代码问题并验证修复效果；还可实现自然语言驱动的自动化测试，校验菜单、交互逻辑是否正常。

早期已经和 Beat Games 等团队开展合作测试，AI 不仅独立完成 VR 井字棋项目开发，还发现《Beat Saber》菜单中传统脚本测试难以捕捉的 UI 重叠缺陷。

不过该产品尚处在实验阶段，能力存在不少局限。工具暂时不支持识别精细手指手势交互，无法获取音频流；主要依靠截图进行视觉判断，面对动态动画、移动物体和细微画面差异识别效果有限。

想要体验该工具，开发者需要 Unity Editor 6000.0.66f2 LTS 以上版本、Meta XR SDK v205、XR 模拟器，搭配 Claude Code、Cursor 等兼容 MCP 协议的 AI 编程工具。将 AI 能力延伸到三维空间测试环节，有望降低 VR 应用调试成本，为 XR 内容开发提效开辟新方向。