메타, AI 에이전트용 신규 도구 '메타 XR 오퍼레이터' 공개
뉴스
이 소식은 Mogura VR의 보도를 요약한 것입니다.
원문 보기
- 메타가 8월 18일 개발자용 신규 도구 '메타 XR 오퍼레이터'를 공개한 소식, 메타 XR SDK v205에 실험적 컴포넌트로 포함될 예정
- MCP를 지원하는 AI 에이전트가 메타 XR 시뮬레이터에서 실행 중인 VR 앱을 확인하고 직접 조작 가능한 것이 특징, MCP는 AI 도구와 외부 시스템을 연결하는 공통 규격
- AI 코딩 지원이 코드 작성과 테스트까지는 보급됐지만 VR 개발에서는 화면 확인과 버튼 조작이 어려워 검증 과정에서 차질이 발생했던 문제를 해결하기 위한 도구
- 앱과 OpenXR 런타임 사이에서 XR 상태·입력을 MCP로 전달하는 방식, 에이전트가 스크린샷과 벽·바닥 공간 정보 수집, 컨트롤러·UI 조작, 유니티 씬 구조 확인까지 수행 가능
- 화면 데이터는 에이전트가 요청할 때만 수집해 프레임 레이트 영향을 최소화했으며, 앱 코드 수정이 불필요한 설계
- 사전 테스트에 비트 게임즈가 참여해 에이전트가 사람 개입 없이 빌드부터 검증까지 완료했고, 비트 세이버 메뉴 화면에서 기존 자동 테스트가 놓치던 UI 중복 버그까지 발견한 사례
- 현재 한계점으로는 손 추적 시 손 단위 조준만 지원하고 손가락 단위 데이터 처리와 음성·애니메이션 평가는 불가능하며, 정적 화면 검증에 적합한 용도로 안내되는 상황
