필사 모드: AR/VR & 공간 컴퓨팅 2026 완벽 가이드 - visionOS 2 · Meta Quest 3/3S · Android XR · Unity · Unreal Engine 5.5 · Reality Composer Pro 심층 분석
한국어프롤로그 — 2026년, 공간 컴퓨팅은 어디까지 왔나
2024년 2월 Apple Vision Pro가 출시되고 2년 3개월이 지났다. 그동안 두 가지가 분명해졌다.
첫째, "VR이 휴대폰을 대체한다"는 명제는 여전히 미래의 일이다. Vision Pro 1세대는 약 50만 대 판매에 그쳤고, Meta Quest 3는 누적 1,400만 대 정도, Quest 3S는 발매 6개월 만에 600만 대를 넘기며 가성비로 시장을 떠받쳤다.
둘째, **공간 컴퓨팅이라는 카테고리는 사라지지 않았다.** Meta는 Horizon OS를 ASUS·Lenovo·Xbox에 개방했고, 삼성·구글이 Android XR로 합류했으며, Snap Spectacles 5는 진짜 AR 안경의 첫 양산 시도를 했다. visionOS 2는 visionOS 3 베타로 옮겨가며 Apple Intelligence를 공간에 끼워 넣었다.
이 글은 2026년 5월 기준의 AR/VR & 공간 컴퓨팅 풍경을 한 호흡으로 정리한다. 하드웨어, 운영체제, 엔진, 입출력 모달리티, 콘텐츠, 산업 활용, 한국·일본 시장까지 — 처음 입문하는 사람이 "여기서부터 시작하면 된다"고 말할 수 있게.
1장 · 용어 정리 — VR, AR, MR, XR, 공간 컴퓨팅은 다 다른 말이다
먼저 단어부터. 미디어에서 흔히 섞어 쓰지만 기술적으로는 구별된다.
- **VR (Virtual Reality)** — 시야 전체가 가상. 외부 환경은 가려진다. 예: PSVR2, Quest 3 게임 모드, Vive Focus.
- **AR (Augmented Reality)** — 현실 위에 가상이 얹힌다. 보통 광학 시스루(see-through). 예: Snap Spectacles 5, XREAL One Pro, Meta Orion 프로토타입.
- **MR (Mixed Reality)** — 패스스루(passthrough) 기반. 카메라로 본 현실 위에 디지털 객체를 합성한다. Quest 3·Vision Pro의 메인 모드.
- **XR (Extended Reality)** — VR/AR/MR을 통칭하는 우산 용어. 표준 단체(Khronos OpenXR), 학계, 채용 공고에서 자주 쓴다.
- **공간 컴퓨팅(Spatial Computing)** — Apple이 Vision Pro 출시 때 밀어붙인 용어. "헤드셋"의 게임/엔터테인먼트 뉘앙스에서 벗어나, 작업·생산성·일상 컴퓨팅으로 확장한 카테고리를 가리킨다.
기억할 한 줄: **VR은 가린다, AR은 얹는다, MR은 합성한다, XR은 다 묶고, 공간 컴퓨팅은 그 위에 일상 컴퓨팅을 얹는다.**
2장 · Apple Vision Pro와 visionOS 2/3 — 가장 비싸고 가장 정교한 출발선
Apple Vision Pro는 가격 3,499달러로 출시된 후 현재 미국·캐나다·영국·독일·프랑스·한국·일본·중국·호주에서 판매 중이다. 2026년 봄, **Vision Pro 2** 루머가 본격화됐다. 보도에 따르면 더 가벼워지고(약 600g 이하), 가격은 1,800~2,000달러대, M5 또는 M6 칩, EyeSight 외부 디스플레이는 유지된다.
visionOS 2(2024년 9월)는 다음을 가져왔다:
- **사진을 공간 사진으로 변환** — 머신러닝으로 깊이 추정.
- **새로운 손 제스처** — 손바닥 위쪽으로 한 번 두드려 환경 메뉴 호출.
- **TestFlight 트래블 모드** — 비행기에서도 헤드셋이 안정적.
- **Mac 가상 디스플레이 와이드/울트라와이드** — 6K 해상도.
visionOS 3 베타(2025년 6월 WWDC 공개, 2025년 가을 정식)는 더 큰 변화를 가져왔다:
- **Apple Intelligence on visionOS** — 공간 안에서 글쓰기 도구, 이미지 플레이그라운드.
- **상호작용형 위젯 v2** — 잠금 화면이 아닌 공간 위젯.
- **iPhone 미러링** — Vision Pro에서 iPhone 화면을 그대로 띄우고 입력.
- **공간 페르소나(Persona) 개선** — FaceTime에서 더 자연스러운 표정과 손 추적.
- **TabletopKit 정식** — 보드게임·교육용 테이블탑 앱 프레임워크.
핵심 입력은 **Look-and-tap** — 눈으로 보고 손가락 끝을 맞대 클릭. 이 메타포가 visionOS의 정체성을 만든다. 컨트롤러는 제공되지 않지만 PSVR2 Sense 컨트롤러 지원이 visionOS 3에서 들어왔다(베타).
3장 · Meta Quest 3 + 3S — 시장을 떠받치는 가성비 진영
Meta Quest 3(2023년 10월, 499달러)는 컬러 패스스루로 MR을 대중화했다. 2024년 10월 출시된 **Quest 3S**는 같은 Snapdragon XR2 Gen 2 칩과 컬러 패스스루를 유지하면서 가격을 **299달러**로 떨어뜨렸다. 디스플레이는 LCD(Quest 3는 LCD 펜케이크 광학), 시야각·해상도가 약간 낮지만, "MR이 처음인 사람"의 가장 합리적인 입구가 됐다.
2026년 5월 현재 라인업:
- **Quest 3** — 512GB만 판매, 약 549달러. 펜케이크 광학, 2064×2208 per eye.
- **Quest 3S** — 128GB 299달러 / 256GB 399달러. 프레넬 광학, 1832×1920 per eye.
- **Quest Pro** — 사실상 단종. 1세대 Pro는 후속 없음.
Meta의 가장 큰 전략 변화는 **Horizon OS의 개방**(2024년 4월 발표):
- **ASUS ROG XR Hybrid Headset** — 게이밍 특화, 2025년 출시.
- **Lenovo Legion XR Glasses** — 생산성·미디어, 2026년 봄 출시.
- **Xbox Edition Quest** — 한정판, Xbox 컨트롤러 번들.
플랫폼 측면에서 Meta는 **Horizon Worlds**(소셜), **Horizon Workrooms**(원격 회의), **Horizon OS**(시스템)로 분리했다. App Store는 **Horizon Store**로 리브랜딩됐다.
4장 · 삼성 + 구글의 반격 — Android XR과 Project Moohan
2024년 12월, 구글·삼성·퀄컴이 합작한 **Android XR**이 공식 발표됐다. 핵심은 다음과 같다:
- **Android XR 1.0** — Android 14 기반의 XR 전용 OS. ARCore와 OpenXR을 표준으로 채택.
- **Gemini Live 통합** — 공간 안에서 음성·시각 AI가 컨텍스트를 인식.
- **Project Moohan** — 삼성이 만드는 첫 Android XR 하드웨어. 2025년 후반 출시(미국 4,500달러대로 보도).
Galaxy XR HMD(상품명 미확정)의 알려진 사양:
- Snapdragon XR2+ Gen 2 또는 Gen 3.
- 마이크로 OLED, eye당 약 3,800×3,800.
- 손/눈 추적 탑재, 컨트롤러 옵션.
- visionOS와 유사한 패스스루 우선 UX.
2026년 봄 시점에서 Android XR은 아직 개발자 키트 단계지만, **Google Play Store XR**(가칭)이 베타로 열렸고, Unity·Unreal 양쪽이 Android XR 빌드 타겟을 지원하기 시작했다.
기억할 한 줄: **Vision Pro와 Quest의 사이에 들어오는 게 Android XR의 포지셔닝이다.**
5장 · Snap Spectacles 5와 Meta Orion — 진짜 AR 안경의 현실
지금까지 본 헤드셋은 모두 **비디오 시스루(VST)** — 카메라로 찍은 영상을 보여준다. 진짜 **광학 시스루(OST)** — 투명 디스플레이를 통해 현실을 직접 보면서 가상을 얹는 — 는 여전히 어렵다.
**Snap Spectacles 5**(2024년 9월, 개발자 전용 99달러/월 구독):
- WaveOptics 도파관(waveguide) 광학.
- 시야각 약 46도, 양안.
- Snap OS, Lens Studio로 개발.
- 무게 226g — 안경처럼 쓸 수 있는 첫 양산형.
**Meta Orion**(2024년 9월 Connect에서 프로토타입 공개):
- Meta가 10년 가까이 R&D 끝에 내놓은 **풀 AR 안경 프로토타입.**
- 실리콘 카바이드 도파관 + microLED.
- 시야각 70도(역대 최대급).
- 외부 컴퓨트 퍽(주머니용)과 EMG 손목 밴드.
- 2024년 시점에선 양산 가격이 약 1만 달러대로 너무 비싸 출시 보류. **2027~28년 양산형 목표.**
**XREAL One Pro**(2024년 10월, 599달러):
- 버드배스(birdbath) 광학. 도파관보다 시야각 크고(57도) 밝지만, 광학 부피가 크다.
- USB-C로 폰·PC·Steam Deck에 직결되는 휴대 디스플레이.
- 2026년 시점 **One Pro 2**(가칭) 후속 루머 — 시야각 65도, AR-만 모드.
**Rokid Max 2**(2025년), **Viture One**, **Nreal/XREAL Air 2 Pro**(2024)도 같은 카테고리 — "AR 안경"이라기보단 **휴대용 디스플레이 + 약한 AR**.
기억할 한 줄: **2026년에도 "안경처럼 가볍고 시야각이 충분히 넓고 AR이 자연스럽다"는 셋을 동시에 만족하는 제품은 없다.**
6장 · 엔진 1 · Unity 6 + PolySpatial — XR의 가장 넓은 길
XR 콘텐츠 제작에서 가장 많이 쓰이는 엔진은 여전히 **Unity**다. Quest, PSVR2, Vision Pro, Android XR, Pico — 거의 모든 헤드셋이 Unity SDK를 1순위로 지원한다.
Unity의 핵심 XR 스택:
- **XR Interaction Toolkit (XRI) 3.x** — 손 추적·컨트롤러·시선·텔레포트 등을 추상화한 상위 컴포넌트.
- **OpenXR Plugin** — Khronos OpenXR 1.1을 통해 Quest, Vive, Pico, Windows MR 등을 공통 API로.
- **Apple visionOS XR Plugin + PolySpatial** — Vision Pro 빌드용. PolySpatial이 RealityKit 백엔드에 Unity 씬을 매핑한다.
- **AR Foundation** — 모바일 AR(ARKit/ARCore)을 공통 API로.
Unity 6(2024년 10월, LTS) 이후 XR 측면 변화:
- **GPU Resident Drawer + GPU Occlusion Culling** — 드로우 콜·CPU 부담을 줄여 Quest 3에서 60% 가까운 렌더 가속.
- **Adaptive Probe Volumes (APV)** — 동적 글로벌 일루미네이션을 모바일 XR에서 쓸 만하게.
- **Hybrid Rendering(URP)** — 카메라 입력·VST와 렌더 결과를 합성하는 MR 전용 파이프라인.
Unity 6.1(2025년 4월)부터:
- **Foveated Rendering Universal API** — Quest, PSVR2, Vision Pro에 공통 API로.
- **Spatial Anchors 2.0** — 클라우드 공유 가능한 영구 앵커.
가장 작은 Unity XR 입문 코드(C# 의사코드):
using UnityEngine;
using UnityEngine.XR.Interaction.Toolkit;
public class Grabbable : MonoBehaviour
{
private XRGrabInteractable grab;
void Start()
{
grab = GetComponent<XRGrabInteractable>();
grab.selectEntered.AddListener(OnGrab);
}
void OnGrab(SelectEnterEventArgs args)
{
Debug.Log($"Grabbed by {args.interactorObject.transform.name}");
}
}
Unity의 강점은 **광범위한 타겟**, 약점은 **Vision Pro에서 RealityKit 네이티브 대비 한 단계 떨어진 머티리얼 표현력.**
7장 · 엔진 2 · Unreal Engine 5.5/5.6 — 비주얼 우위의 진영
Unreal Engine은 XR에서 시각적 충실도가 가장 높다.
**Unreal Engine 5.5**(2024년 11월):
- **Lumen + Nanite** — 동적 글로벌 일루미네이션과 무한 폴리곤 메시. XR에서도 (성능 허용 한도 내) 작동.
- **MetaXR Plugin** — Meta가 직접 유지하는 Quest/Horizon OS용 플러그인.
- **OpenXR 플러그인 안정화** — Vive, Pico, Windows MR을 공통 처리.
- **Niagara** — GPU 파티클, XR에서 비주얼 임팩트.
Unreal Engine 5.6(2025년 6월):
- **Mobile Forward+ for XR** — Quest 3 같은 모바일 XR에서 Lumen 일부를 흉내 내는 경량 GI.
- **PixelStreaming for XR** — 클라우드에서 렌더링한 결과를 헤드셋으로 스트림.
- **MetaHuman Animator + XR** — 페이셜 캡처 + 공간 페르소나.
Unreal의 약점: **Vision Pro 공식 지원이 늦다.** 2026년 5월 시점에 Vision Pro용 정식 빌드 타겟은 베타. 대신 *PixelStreaming + Vision Pro Safari WebXR*로 우회하는 패턴이 흔하다.
대표작:
- **Half-Life: Alyx**(2020, Source 2 — 비교 대상)
- **Asgard's Wrath 2**(2023, Quest, Unity)
- **Batman: Arkham Shadow**(2024, Quest 3, Camouflaj/Meta, Unreal)
- **Metro Awakening**(2024, PSVR2/Quest, Unity)
기억할 한 줄: **Unity는 어디서나 돌고, Unreal은 어디서도 가장 예쁘다.**
8장 · 엔진 3 · Apple RealityKit + Reality Composer Pro 2
Vision Pro를 최대치로 끌어내려면 **RealityKit + Reality Composer Pro 2**가 답이다. Swift/SwiftUI로 직접 짜고, USDZ 자산을 Reality Composer Pro로 합치는 워크플로.
RealityKit 2026의 핵심:
- **MaterialX 통합** — 산업 표준 셰이딩 그래프를 RealityKit이 그대로 읽는다.
- **Procedural Shaders v2** — Reality Composer Pro에서 노드 그래프로 셰이더를 짜고 visionOS에서 컴파일.
- **Volume Effects** — 입자, 안개, 폭발.
- **Object Tracking** — 실제 물체(USDZ 레퍼런스)를 인식해 그 위에 콘텐츠 고정.
- **Multipeer Anchors** — 같은 공간에서 여러 Vision Pro가 공유하는 앵커.
가장 작은 SwiftUI + RealityKit 코드:
struct ImmersiveView: View {
var body: some View {
RealityView { content in
// 1. 빈 엔티티 트리
let root = Entity()
// 2. USDZ 모델 로드
if let scene = try? await Entity(named: "Cube") {
root.addChild(scene)
}
// 3. 라이팅
let light = DirectionalLight()
light.light.intensity = 4000
root.addChild(light)
content.add(root)
}
}
}
**Reality Composer Pro 2**(2025년 9월, Xcode 16.4 동봉):
- **Shader Graph 2.0** — 노드 기반.
- **Particle Emitter 시각 편집기.**
- **TabletopKit 컨테이너.**
- **USD ML Skeleton** — RealityKit 스키닝 검증.
RealityKit의 강점: **visionOS 네이티브 표현력 1등**, 약점: **Vision Pro 외 어디서도 안 돈다.**
9장 · WebXR — 브라우저에서 도는 공간 컴퓨팅
설치 없이, 헤드셋에 내장된 브라우저로 즉시 들어가는 경험을 만들고 싶다면 **WebXR**.
핵심 스택:
- **Three.js** — 사실상 표준. `WebXRManager`로 OpenXR 호출을 추상화.
- **Babylon.js** — Microsoft 후원, XR 기본 지원 깊다.
- **A-Frame** — HTML 선언형. 입문용.
- **PlayCanvas** — 브라우저 IDE + WebXR.
- **react-three-fiber + @react-three/xr** — React 컴포넌트 모델.
가장 작은 react-three-fiber + XR 컴포넌트 의사코드:
const store = createXRStore()
export default function App() {
return (
<>
</>
)
}
2026년 시점 WebXR 현실:
- **Quest 3 브라우저** — 가장 잘 돈다. WebGPU도 안정.
- **Vision Pro Safari** — WebXR 일부 지원(visionOS 2.4부터), 손 추적 가능, 컨트롤러는 없다.
- **PSVR2 PC** — Steam VR 경유로 데스크톱 브라우저에서.
대표 사용처: **VRChat 웹 로비, 박물관 가상 투어, 부동산 가상 투어, 교육 시뮬레이터.**
10장 · OpenXR과 OpenUSD — 표준 두 기둥
XR이 파편화로 죽지 않으려면 표준이 필요하다. 두 가지가 핵심이다.
OpenXR (Khronos)
- **1.1**(2024년) — 마이크로 LED 디스플레이 지원, 손 추적 API 표준화.
- **1.1.x**(현재) — Foveated rendering 확장, 패스스루 카메라 직접 접근(권한 모델).
- **지원 헤드셋** — Quest 3/3S, Vision Pro(부분, RealityKit 우선), Vive, Pico, Windows MR, PSVR2 PC(Sony가 베타), Android XR.
OpenUSD (Pixar + Apple + NVIDIA + Disney + Adobe)
- Pixar의 USD가 **Universal Scene Description** 표준으로 합류.
- Apple Vision Pro는 USDZ를 자산 포맷으로 채택.
- NVIDIA Omniverse, Adobe Substance, Maxon Cinema 4D, Autodesk Maya — 다 USD를 표준 교환 포맷으로.
- 2024년 Linux Foundation 산하 **AOUSD**(Alliance for OpenUSD) 결성.
기억할 한 줄: **하드웨어는 OpenXR로, 자산은 OpenUSD로 — 이게 2026년의 베팅이다.**
11장 · 공간 입력 — 손, 눈, 몸, 컨트롤러, 음성
XR이 일반 컴퓨터와 다른 가장 큰 차이는 **입력 모달리티가 다양하다**는 점이다.
손 추적(Hand Tracking)
- **Quest 3** — 25개 관절, 30Hz. 핀치, 시선+핀치, 두 손 제스처.
- **Vision Pro** — 25관절, 60Hz. 카메라 6대로 정확도가 가장 높다. 외부 컨트롤러 없이 시선+핀치만으로 OS 운용.
- **Snap Spectacles 5** — 손바닥 추적, 도파관 시야각 안에서만.
눈 추적(Eye Tracking)
- **Vision Pro** — 모든 IR 카메라가 동공·각막을 추적해 시선 광선을 만든다. **Look-and-tap**의 핵심.
- **Quest Pro / Quest 3S에는 없음.** Quest 3는 부분 추정.
- **PSVR2** — 시선으로 Foveated rendering. 게임에 활용.
몸 추적(Body Tracking)
- **Quest 3** — `Body Tracking API`로 상체 추적(상반신 18개 관절).
- **VRChat 풀바디** — Vive 트래커, Tundra Labs, Sony Mocopi.
- **Sony Mocopi**(2023, 일본 발매) — 6개 IMU를 몸에 붙여 모션 캡처. VRChat·Cluster·Spatial.io 호환.
컨트롤러
- **Quest Touch Plus**(Quest 3) — 트래킹 링 제거, 손 추적 함께 활용.
- **PSVR2 Sense** — 햅틱 + 어댑티브 트리거 + 정전식 손가락 감지.
- **Vision Pro** — 공식 컨트롤러 없음. 2025년 PSVR2 Sense 호환 베타.
음성
- **Quest 3 Voice** — Meta AI(Llama 기반) 연동.
- **Vision Pro Siri + Apple Intelligence**.
- **Android XR + Gemini Live** — 가장 깊게 통합.
12장 · 공간 오디오 — 머리에 잠긴 소리 vs 세계에 잠긴 소리
XR에서 오디오는 **헤드-락(head-locked)** 과 **월드-락(world-locked)** 으로 나뉜다.
- **헤드-락** — 머리가 돌아도 소리가 머리 기준으로 따라온다. UI 알림음 같은 것.
- **월드-락** — 소리가 공간의 특정 위치에 박혀 있다. 머리를 돌리면 소리도 그쪽에서 들린다.
핵심 표준·기술:
- **Apple Spatial Audio** — Apple Music, FaceTime, Vision Pro 시스템 전반. Dolby Atmos 포함.
- **MPEG-H 3D Audio** — 표준화된 오브젝트 기반 오디오, 한국 KBS·일본 NHK가 방송에 도입.
- **Dolby Atmos for VR** — 오브젝트 기반, 게임에 활용.
- **Steam Audio (Valve)** — 무료 SDK, 머신러닝 기반 HRTF.
- **Oculus Audio SDK / Meta XR Audio SDK** — Quest 전용 공간 오디오.
Unity·Unreal 양쪽에서 공간 오디오를 켜는 건 머티리얼 한 줄과 비슷한 수준으로 단순해졌지만, **HRTF**(머리 관련 전달 함수)의 개인화는 여전히 어려운 분야다.
13장 · 공간 비디오 — iPhone에서 찍고 Vision Pro로 본다
2023년 iPhone 15 Pro부터 **공간 비디오**(spatial video) 촬영이 가능해졌다. 두 개의 카메라(메인 + 초광각)를 동시에 써서 좌·우 시점을 1080p/30fps로 기록한다.
- **iPhone 15 Pro/Max** — 1080p/30fps.
- **iPhone 16 Pro/Max** — 1080p/60fps.
- **iPhone 17 Pro / Air** — 4K/30fps.
재생 측:
- **Vision Pro** — 사진 앱에서 자동 인식, 풀 입체로 재생.
- **Quest 3** — Apple 호환 모드(앱), 또는 Meta의 자체 포맷으로 변환.
- **YouTube VR** — 2025년 공간 비디오 업로드 지원.
공간 사진(Spatial Photo) — visionOS 2부터 일반 평면 사진도 ML 깊이 추정으로 공간 사진으로 변환 가능.
14장 · 3D 모델링 — Blender, Maya, Cinema 4D, Houdini, RCP 2
XR 콘텐츠의 모델은 어디서 오는가:
- **Blender 4.4 / 4.5**(2025-2026) — 무료, 사실상 표준 입문 도구. USDZ 익스포트 안정화. **Geometry Nodes**로 절차적 모델링.
- **Autodesk Maya 2026** — 대형 스튜디오의 캐릭터·애니메이션 표준.
- **Maxon Cinema 4D 2026** — 모션 그래픽 강점. Redshift 렌더러.
- **SideFX Houdini 20.5** — 절차적 모델링·VFX. USD 네이티브.
- **Autodesk 3ds Max** — 건축 시각화 강점.
- **Pixologic ZBrush + Maxon ZBrush 2026** — 디지털 스컬프팅.
XR 전용 도구:
- **Reality Composer Pro 2** — visionOS 자산 검증·셰이더·파티클 합성.
- **Adobe Substance 3D** — 텍스처링·머티리얼 표준.
- **Quixel Megascans (Fab)** — Epic이 무료로 풀고 Fab으로 통합.
- **NVIDIA Omniverse** — USD 협업 허브, Kit 105+.
AI 3D 생성:
- **Meshy 5** — 텍스트→메시, PBR 텍스처 포함.
- **Tripo 3D** — 이미지·텍스트→메시.
- **Rodin** — 캐릭터 특화.
- **Luma AI Genie + Dream Machine 3D** — 캡처 + 생성.
- **NVIDIA GET3D / Edify 3D** — 연구 → 상용화 진행 중.
15장 · 자산 스토어와 마켓플레이스
- **Unity Asset Store** — 130만+ 자산. XR 인터랙션 키트.
- **Epic Fab**(2024년 출시) — Quixel + Marketplace + ArtStation Marketplace + Sketchfab 통합한 단일 마켓.
- **Sketchfab** — 무료/유료 글로벌 3D 자산.
- **TurboSquid** — 전통적 3D 마켓.
- **Adobe Stock 3D** — Substance와 연동.
XR 헤드셋 콘텐츠 스토어:
- **Meta Horizon Store** — Quest용.
- **Apple App Store on visionOS** — Vision Pro용.
- **Steam VR** — PC VR(Index, Vive, Quest Link).
- **PlayStation Store** — PSVR2.
- **App Lab(Quest)** — 베타·인디 채널.
- **SideQuest** — 비공식 인디.
16장 · 대표 VR/AR 앱과 게임 — 2026년 매출 상위
소셜·게임 측면에서 누가 살아남았나:
- **VRChat** — 누적 사용자 수억, 일본·한국에서 가장 큰 VR 소셜.
- **Rec Room** — 모바일·콘솔·VR 크로스플랫폼 소셜.
- **Roblox VR** — 2024년 Vision Pro 공식 출시.
- **Spatial.io** — 가상 갤러리·이벤트, B2B 강세.
- **Beat Saber** — 누적 1억 곡 판매 돌파, 여전히 Quest의 1번 앱.
- **Half-Life: Alyx** — PC VR의 사실상 레퍼런스(2020년이지만 여전).
- **Asgard's Wrath 2** — Quest 시그니처 RPG.
- **Batman: Arkham Shadow** — Quest 3 전용, 2024 GOTY VR.
- **Metro Awakening** — PSVR2/Quest, 2024.
- **Resident Evil 4 VR Mode**(PSVR2).
- **Gran Turismo 7 VR**(PSVR2 시그니처).
생산성·실용:
- **Immersed** — Vision Pro/Quest 동시 지원, 가상 모니터 5개까지.
- **Virtual Desktop** — PCVR 무선 스트리밍의 표준.
- **Horizon Workrooms** — Quest 회의실.
- **Apple Freeform / Notes / Safari on visionOS** — 일상 도구.
17장 · 엔터프라이즈 XR — 훈련, 시뮬레이션, 디자인 리뷰
소비자 헤드셋과는 다른 시장이 있다. 산업·국방·의료.
- **Varjo XR-4** (핀란드, 5,990달러+) — 인간 시각 한계급 4K per eye. 비행·외과·자동차 시뮬레이션.
- **Microsoft HoloLens 2** — 2024년 신규 판매 종료. 기존 산업 고객은 2027년까지 지원.
- **Magic Leap 2** — 의료·국방. 광학 시스루.
- **ThirdEye X2** — 산업용 OST.
- **RealWear Navigator** — 헬멧 통합형, 현장 작업자용.
전형적 사례:
- **Boeing 항공기 정비** — Vision Pro + 커스텀 앱으로 정비 매뉴얼 오버레이.
- **Mercedes-Benz 디자인 리뷰** — Varjo XR-4로 클레이 모델 위에 디지털 페인트.
- **Mayo Clinic 수술 시뮬레이션** — Magic Leap 2.
- **Walmart 트레이닝** — Quest 3, 직원 1,000만 시간 누적.
18장 · 클라우드 렌더링 — NVIDIA CloudXR, PixelStreaming
헤드셋 안의 모바일 GPU(Snapdragon XR2 Gen 2)로는 한계가 있는 그래픽을 어떻게 해결하나?
- **NVIDIA CloudXR** — 클라우드 GPU에서 렌더 → 5G/Wi-Fi 6/7로 헤드셋에 스트림.
- **Unreal PixelStreaming** — 같은 개념을 Unreal Engine 5.x로.
- **Holo-Light** — 산업용 클라우드 XR 스트리밍.
- **Pixyz** — CAD → XR 자동 변환 파이프라인.
- **Meta XR Cloud Streaming** — Horizon OS용 베타.
지연시간(latency) 예산:
- 헤드셋 내부 렌더링: 모션-투-포톤 ~20ms.
- 클라우드 + 5G: ~40~60ms(좋은 환경).
- 클라우드 + Wi-Fi 6E + LAN: ~30~40ms.
기억할 한 줄: **클라우드 렌더링은 시야가 빠르게 안 움직이는 산업 시뮬레이션에 잘 맞고, 액션 게임에는 여전히 어렵다.**
19장 · 한국 시장 — Naver Z, Kakao, NHN Cloud, LG U+
한국에서 XR은 메타버스 1차 거품 이후 살아남은 플레이어가 누구냐가 관건이었다.
- **Naver Z / ZEPETO** — Z세대 글로벌 4억+ 사용자. 모바일 중심이지만 Vision Pro·Quest 3 앱 출시(2024).
- **Kakao Spatial** — Kakao Brain의 공간 컴퓨팅 R&D.
- **NHN Cloud VR** — B2B 가상 콘퍼런스·전시.
- **LG U+ U+VR Studio** — 통신사의 VR 콘텐츠 스튜디오, 5G 결합.
- **삼성전자 Galaxy XR / Project Moohan** — 한국이 글로벌 헤드셋의 한 축이 되는 첫 진지한 시도(2025년 후반).
- **카카오게임즈 KartRider VR**(개발 중) — Quest 호환.
학계·연구:
- **KAIST UVR Lab**, **POSTECH GFX Lab**.
- **ETRI 공간 컴퓨팅 사업단**.
- **서울대 인공지능대학원의 XR + AI 연구.**
20장 · 일본 시장 — Sony, Cluster, VRChat 일본 커뮤니티, Vket
- **Sony PSVR2 + PSVR2 PC 호환**(2024년 8월) — PS5 전용에서 PC로 확장하며 점유율 회복.
- **Cluster** — 일본 토종 메타버스 플랫폼. 2025년 MAU 800만 돌파.
- **VRChat 일본 커뮤니티** — 아바타 문화·이벤트의 본진.
- **Vket(Virtual Market)** — 세계 최대 VR 전시·마켓 이벤트, 매년 두 번.
- **Pixiv VRoid Studio** — 아바타 제작 표준 도구.
- **Niantic + 닌텐도**(소문) — 위치 기반 AR 협업.
일본은 **소셜 VR** 측면에서 세계에서 가장 활발한 시장이다. VRChat 사용자의 40% 가까이가 일본어를 1차 언어로 한다.
21장 · 학습 경로 — 어디부터 시작하나
5가지 트랙으로 정리.
트랙 1 · Quest 3로 인디 게임 만들기
1. Quest 3 또는 3S 구입.
2. Unity 6 LTS 설치, XR Interaction Toolkit + OpenXR + Meta XR SDK.
3. `BNG VR Framework` 같은 시작 키트로 한 달 안에 첫 빌드.
4. SideQuest → App Lab → Horizon Store.
트랙 2 · Vision Pro 앱 만들기
1. Mac + Xcode 16+ + visionOS 2 SDK.
2. Swift/SwiftUI + RealityKit 학습.
3. Reality Composer Pro 2로 USDZ 자산 합성.
4. TestFlight → App Store.
트랙 3 · WebXR로 빠른 프로토타입
1. Three.js + WebXR + Vite.
2. Quest 3 브라우저로 즉시 테스트.
3. Vercel/Netlify 배포 → 헤드셋 브라우저에서 접속.
트랙 4 · 3D 아티스트
1. Blender 4.5(무료) 입문.
2. USDZ/glTF 익스포트 익숙해지기.
3. Substance 3D 텍스처링.
4. Sketchfab·Fab에 포트폴리오 업로드.
트랙 5 · 엔터프라이즈 XR
1. Varjo·Magic Leap 같은 산업 헤드셋 경험.
2. Unity Industry / Unreal Enterprise.
3. PTC Vuforia, Reflekt One 같은 산업용 AR.
4. CAD → USD 파이프라인.
22장 · 함정과 안티패턴
XR 개발에서 흔히 빠지는 함정.
- **멀미 무시.** 60fps는 최소, 가급적 90fps. 강제 카메라 이동, 갑작스러운 가속은 멀미의 1순위 원인.
- **드로우 콜 과다.** Quest 3는 약 200~300 드로우 콜이 안전 한계. 그 이상이면 프레임 드롭.
- **거대 텍스처.** 4K 텍스처는 헤드셋 메모리에 큰 부담. 1K~2K로 최적화.
- **UI를 평면으로만.** 공간 컴퓨팅의 핵심은 **6DOF UI**다. 평면 UI만 띄우면 일반 모니터를 가까이 두는 것과 같다.
- **두 손을 다 쓰게 강요.** 손이 피로하다(`gorilla arm`). 짧은 세션, 휴식, 시선·음성 보조.
- **외부 컨트롤러 가정.** Vision Pro에는 없다. Android XR은 옵션. 시선·핀치·음성으로도 작동하게.
- **공간 텍스트 가독성.** 0.5m 거리에서 작은 글씨는 안 읽힌다. 1m 기준 24pt 이상.
23장 · 비교 매트릭스 — 어떤 헤드셋에 어떤 엔진?
| 헤드셋 | 가격대 | OS | 1순위 엔진 | 입력 | 특징 |
|---|---|---|---|---|---|
| Vision Pro | 3,499달러 | visionOS | RealityKit | 시선+핀치 | 1등 디스플레이·1등 가격 |
| Quest 3 | 499달러 | Horizon OS | Unity / Unreal | 손+컨트롤러 | 가성비 1등 |
| Quest 3S | 299달러 | Horizon OS | Unity / Unreal | 손+컨트롤러 | 입문 |
| PSVR2 | 549달러 | PS5 OS / PC SteamVR | Unreal / Unity | Sense 컨트롤러 | PS5 게이밍 |
| Pico 4 Ultra | 600~700달러 | Pico OS | Unity | 손+컨트롤러 | 중국·아시아 |
| Vive XR Elite | 1,099달러 | Vive Wave | Unity / Unreal | 손+컨트롤러 | 엔터프라이즈 |
| Varjo XR-4 | 5,990달러+ | Varjo OS | Unity / Unreal | 컨트롤러 | 산업 시뮬레이션 |
| Magic Leap 2 | 3,299달러 | Magic Leap OS | Unity / WebXR | 손+컨트롤러 | 의료·국방 OST |
| Snap Spectacles 5 | 99달러/월 | Snap OS | Lens Studio | 손 | 진짜 AR 도전 |
24장 · 2026년 ~ 2027년 전망
- **Vision Pro 2** — 더 가볍게, 더 싸게(1,800~2,000달러). 2026년 말 또는 2027년 초.
- **Quest 4 / Quest Pro 2** — 안 나올 가능성이 더 높음. Meta는 가격을 낮추는 방향.
- **Android XR 양산화** — 삼성·구글이 2026~27에 본격적인 판매 시작.
- **Snap Spectacles 6** — 더 가벼운 AR 안경.
- **Meta Orion 양산형** — 2027~28 목표.
- **Apple AR Glasses** — 2027~2028 루머. Vision Pro 라인과 별도.
- **WebGPU + WebXR** — 브라우저 공간 컴퓨팅이 한 단계 더.
- **AI + 공간** — 모든 헤드셋에 멀티모달 LLM(Gemini, Apple Intelligence, Meta AI)가 표준.
- **공간 비디오 표준화** — MV-HEVC 외 새로운 코덱 후보.
기억할 한 줄: **2026년은 "Vision Pro 1세대의 끝, 2세대의 시작, Android XR의 등장, AR 안경의 양산 시도"가 동시에 일어나는 해다.**
25장 · 마치며 — 헤드셋은 아직 휴대폰을 대체하지 않았지만
2024년 Vision Pro 출시 직후 "이게 제2의 iPhone이다"라는 말이 있었다. 2026년 시점, 그 말이 아직 옳지 않다는 건 명백하다.
하지만 동시에, **공간 컴퓨팅이 사라지지도 않았다.** Quest 3는 일상의 게임 콘솔이 됐고, Vision Pro는 작업·생산성의 새 카테고리를 열었고, Android XR이 합류했고, Snap·Meta가 진짜 AR 안경에 도전 중이다. WebXR이 설치 없는 즉시 접근을 가능하게 하고, OpenXR과 OpenUSD가 파편화의 위험을 누른다.
지금 XR에 들어오기에 가장 좋은 이유는, **표준이 자리 잡혔고**, **하드웨어가 두 가격대(300달러대, 3,500달러대)로 양극화됐으며**, **엔진 두 개(Unity·Unreal)와 OS 세 개(visionOS·Horizon·Android XR)만 알면 시장의 90%를 커버**할 수 있기 때문이다.
남은 건 콘텐츠다. 거기에 들어갈 사람이 필요하다.
참고 자료
- Apple visionOS Developer — https://developer.apple.com/visionos/
- Apple RealityKit — https://developer.apple.com/documentation/realitykit
- Reality Composer Pro — https://developer.apple.com/augmented-reality/tools/
- Meta Quest Developer — https://developer.oculus.com/
- Meta Horizon OS — https://www.meta.com/horizon-os/
- Google Android XR — https://www.android.com/xr/
- Khronos OpenXR — https://www.khronos.org/openxr/
- Alliance for OpenUSD — https://aousd.org/
- Unity XR Documentation — https://docs.unity3d.com/Manual/XR.html
- Unity PolySpatial for visionOS — https://docs.unity3d.com/Packages/com.unity.polyspatial@2.0/
- Unreal Engine XR — https://dev.epicgames.com/documentation/en-us/unreal-engine/xr-development-in-unreal-engine
- Three.js WebXR — https://threejs.org/docs/#manual/en/introduction/How-to-create-VR-content
- Babylon.js WebXR — https://doc.babylonjs.com/features/featuresDeepDive/webXR/
- A-Frame — https://aframe.io/
- Snap Spectacles — https://www.spectacles.com/
- XREAL — https://www.xreal.com/
- Varjo — https://varjo.com/
- Magic Leap — https://www.magicleap.com/
- Sony PSVR2 — https://www.playstation.com/en-us/ps-vr2/
- HTC Vive — https://www.vive.com/
- Pico XR — https://www.picoxr.com/
- VRChat — https://hello.vrchat.com/
- Cluster — https://cluster.mu/
- ZEPETO — https://zepeto.me/
- Blender — https://www.blender.org/
- NVIDIA Omniverse — https://www.nvidia.com/en-us/omniverse/
- Steam Audio — https://valvesoftware.github.io/steam-audio/
- NVIDIA CloudXR — https://developer.nvidia.com/cloudxr-sdk
현재 단락 (1/373)
2024년 2월 Apple Vision Pro가 출시되고 2년 3개월이 지났다. 그동안 두 가지가 분명해졌다.