🔎 #719. 바이브 코딩으로 XR 앱 만드는 법

Published on: 2026.04.02

안녕하세요?
매일 사람이 쓰는 뉴스레터 Daily Prompt입니다.

오늘은 말로 설명하면 60초 안에 XR 앱이 만들어지는 Google의 새로운 프레임워크를 소개합니다.

바이브 코딩으로 XR 앱 만드는 법

구글 리서치가 Vibe Coding XR을 발표했습니다. 텍스트나 음성으로 원하는 공간 경험을 설명하면, Gemini가 코드를 생성해 60초 안에 작동하는 XR 앱을 만들어줍니다.
핵심은 XR Blocks라는 오픈소스 웹 프레임워크입니다. WebXR, three.js, LiteRT.js 위에 구축되어 환경 인식, 손 상호작용, 물리 시뮬레이션을 지원합니다.
Gemini Canvas가 XR 전문 설계자 역할을 합니다. XR Blocks의 아키텍처를 학습한 시스템 프롬프트, 코드 템플릿, 장문 컨텍스트 추론을 활용해 장면 구성·인터랙션·AI 기능을 한 번에 설계합니다.

XR Blocks 프레임워크 구조 — 데스크톱 시뮬레이션과 Android XR 배포

어떤 앱을 만들 수 있나

교육: 오일러 정리를 3D 도형으로 시각화하는 수학 튜터, 무게 균형 실험을 직접 해보는 물리 실험실, 연소 반응을 체적 시각화로 보여주는 화학 수업, 손동작으로 슈뢰딩거의 고양이를 체험하는 양자역학 데모
게임: 손으로 치는 XR 배구, 크롬 공룡 게임의 XR 버전, 환경 충돌 감지가 되는 스포츠 프로토타입
데이터 시각화: NASA 외계 행성 데이터 매핑, 절차적으로 생성되는 도시 지도, 고대 이집트 피라미드 탐험

데스크톱에서도 테스트 가능

'시뮬레이션 현실(Simulated Reality)' 환경을 제공해, Android XR 헤드셋 없이도 데스크톱 브라우저에서 깊이 감지·손 상호작용·물리 시뮬레이션을 테스트할 수 있습니다.
결과물은 공개 링크로 공유하거나, Android XR(삼성 Galaxy XR 등)에 바로 배포할 수 있습니다.

성능은 어느 정도인가

구글 내부 20명이 60개 프롬프트를 테스트한 VCXR60 데이터셋 기준, 초기 성공률은 약 70%입니다.
Gemini Pro 모드가 가장 안정적인 결과를 냈고, Flash 모드는 단순 프롬프트에서 20초 이내로 더 빠르게 처리했습니다.
6개월간 11번의 메이저 릴리스를 거쳤으며, ACM CHI 2026 구글 부스에서 라이브 데모를 선보일 예정입니다.
라이브 데모: xrblocks.github.io/gem
GitHub: github.com/google/xrblocks
샘플 갤러리: xrblocks.github.io/docs/samples

마무리

'바이브 코딩'이라는 말이 올해 들어 빠르게 퍼지고 있습니다. 코드를 한 줄도 쓰지 않고 의도만 전달하면 AI가 구현하는 방식인데, 이번에는 그 범위가 2D 웹을 넘어 공간 컴퓨팅까지 확장되었습니다. 전문 개발자만의 영역이던 XR 프로토타이핑이, 아이디어를 말로 설명할 수 있는 사람이라면 누구에게나 열리기 시작한 셈입니다.
역사적으로 보면, 새로운 컴퓨팅 플랫폼은 진입 장벽이 낮아지는 순간 폭발적으로 성장했습니다. 개인용 컴퓨터는 GUI가, 모바일은 앱스토어가 그 역할을 했습니다. XR은 지금까지 '만드는 사람'이 너무 적다는 것이 가장 큰 병목이었는데, AI가 그 병목을 우회하는 길을 열고 있습니다.
다만 성공률 70%라는 수치는, 아직은 프로토타이핑 도구이지 프로덕션 도구가 아니라는 점을 분명히 합니다. 60초 만에 만들어진 앱이 실제 사용자 앞에 서려면 여전히 전문가의 손이 필요합니다. AI가 '첫 번째 초안'의 비용을 극단적으로 낮추면, 인간의 역할은 '초안을 고르고 다듬는 편집자'로 이동합니다.
다만 개인적인 경험 상, 개발 지식이 없어도 클로드 코드와 여러 시도를 해보면서, 전문가가 아니어서 시행착오는 있을 수 있지만 그 과정에서 배우는 것이 많기 때문에 일단 시도해보는 것이 중요하다고 생각합니다.

Event