- Published on
AR/VR & 공간 컴퓨팅 2026 완벽 가이드 - visionOS 2 · Meta Quest 3/3S · Android XR · Unity · Unreal Engine 5.5 · Reality Composer Pro 심층 분석
- Authors

- Name
- Youngju Kim
- @fjvbn20031
프롤로그 — 2026년, 공간 컴퓨팅은 어디까지 왔나
2024년 2월 Apple Vision Pro가 출시되고 2년 3개월이 지났다. 그동안 두 가지가 분명해졌다.
첫째, "VR이 휴대폰을 대체한다"는 명제는 여전히 미래의 일이다. Vision Pro 1세대는 약 50만 대 판매에 그쳤고, Meta Quest 3는 누적 1,400만 대 정도, Quest 3S는 발매 6개월 만에 600만 대를 넘기며 가성비로 시장을 떠받쳤다.
둘째, 공간 컴퓨팅이라는 카테고리는 사라지지 않았다. Meta는 Horizon OS를 ASUS·Lenovo·Xbox에 개방했고, 삼성·구글이 Android XR로 합류했으며, Snap Spectacles 5는 진짜 AR 안경의 첫 양산 시도를 했다. visionOS 2는 visionOS 3 베타로 옮겨가며 Apple Intelligence를 공간에 끼워 넣었다.
이 글은 2026년 5월 기준의 AR/VR & 공간 컴퓨팅 풍경을 한 호흡으로 정리한다. 하드웨어, 운영체제, 엔진, 입출력 모달리티, 콘텐츠, 산업 활용, 한국·일본 시장까지 — 처음 입문하는 사람이 "여기서부터 시작하면 된다"고 말할 수 있게.
1장 · 용어 정리 — VR, AR, MR, XR, 공간 컴퓨팅은 다 다른 말이다
먼저 단어부터. 미디어에서 흔히 섞어 쓰지만 기술적으로는 구별된다.
- VR (Virtual Reality) — 시야 전체가 가상. 외부 환경은 가려진다. 예: PSVR2, Quest 3 게임 모드, Vive Focus.
- AR (Augmented Reality) — 현실 위에 가상이 얹힌다. 보통 광학 시스루(see-through). 예: Snap Spectacles 5, XREAL One Pro, Meta Orion 프로토타입.
- MR (Mixed Reality) — 패스스루(passthrough) 기반. 카메라로 본 현실 위에 디지털 객체를 합성한다. Quest 3·Vision Pro의 메인 모드.
- XR (Extended Reality) — VR/AR/MR을 통칭하는 우산 용어. 표준 단체(Khronos OpenXR), 학계, 채용 공고에서 자주 쓴다.
- 공간 컴퓨팅(Spatial Computing) — Apple이 Vision Pro 출시 때 밀어붙인 용어. "헤드셋"의 게임/엔터테인먼트 뉘앙스에서 벗어나, 작업·생산성·일상 컴퓨팅으로 확장한 카테고리를 가리킨다.
기억할 한 줄: VR은 가린다, AR은 얹는다, MR은 합성한다, XR은 다 묶고, 공간 컴퓨팅은 그 위에 일상 컴퓨팅을 얹는다.
2장 · Apple Vision Pro와 visionOS 2/3 — 가장 비싸고 가장 정교한 출발선
Apple Vision Pro는 가격 3,499달러로 출시된 후 현재 미국·캐나다·영국·독일·프랑스·한국·일본·중국·호주에서 판매 중이다. 2026년 봄, Vision Pro 2 루머가 본격화됐다. 보도에 따르면 더 가벼워지고(약 600g 이하), 가격은 1,800~2,000달러대, M5 또는 M6 칩, EyeSight 외부 디스플레이는 유지된다.
visionOS 2(2024년 9월)는 다음을 가져왔다:
- 사진을 공간 사진으로 변환 — 머신러닝으로 깊이 추정.
- 새로운 손 제스처 — 손바닥 위쪽으로 한 번 두드려 환경 메뉴 호출.
- TestFlight 트래블 모드 — 비행기에서도 헤드셋이 안정적.
- Mac 가상 디스플레이 와이드/울트라와이드 — 6K 해상도.
visionOS 3 베타(2025년 6월 WWDC 공개, 2025년 가을 정식)는 더 큰 변화를 가져왔다:
- Apple Intelligence on visionOS — 공간 안에서 글쓰기 도구, 이미지 플레이그라운드.
- 상호작용형 위젯 v2 — 잠금 화면이 아닌 공간 위젯.
- iPhone 미러링 — Vision Pro에서 iPhone 화면을 그대로 띄우고 입력.
- 공간 페르소나(Persona) 개선 — FaceTime에서 더 자연스러운 표정과 손 추적.
- TabletopKit 정식 — 보드게임·교육용 테이블탑 앱 프레임워크.
핵심 입력은 Look-and-tap — 눈으로 보고 손가락 끝을 맞대 클릭. 이 메타포가 visionOS의 정체성을 만든다. 컨트롤러는 제공되지 않지만 PSVR2 Sense 컨트롤러 지원이 visionOS 3에서 들어왔다(베타).
3장 · Meta Quest 3 + 3S — 시장을 떠받치는 가성비 진영
Meta Quest 3(2023년 10월, 499달러)는 컬러 패스스루로 MR을 대중화했다. 2024년 10월 출시된 Quest 3S는 같은 Snapdragon XR2 Gen 2 칩과 컬러 패스스루를 유지하면서 가격을 299달러로 떨어뜨렸다. 디스플레이는 LCD(Quest 3는 LCD 펜케이크 광학), 시야각·해상도가 약간 낮지만, "MR이 처음인 사람"의 가장 합리적인 입구가 됐다.
2026년 5월 현재 라인업:
- Quest 3 — 512GB만 판매, 약 549달러. 펜케이크 광학, 2064×2208 per eye.
- Quest 3S — 128GB 299달러 / 256GB 399달러. 프레넬 광학, 1832×1920 per eye.
- Quest Pro — 사실상 단종. 1세대 Pro는 후속 없음.
Meta의 가장 큰 전략 변화는 Horizon OS의 개방(2024년 4월 발표):
- ASUS ROG XR Hybrid Headset — 게이밍 특화, 2025년 출시.
- Lenovo Legion XR Glasses — 생산성·미디어, 2026년 봄 출시.
- Xbox Edition Quest — 한정판, Xbox 컨트롤러 번들.
플랫폼 측면에서 Meta는 Horizon Worlds(소셜), Horizon Workrooms(원격 회의), Horizon OS(시스템)로 분리했다. App Store는 Horizon Store로 리브랜딩됐다.
4장 · 삼성 + 구글의 반격 — Android XR과 Project Moohan
2024년 12월, 구글·삼성·퀄컴이 합작한 Android XR이 공식 발표됐다. 핵심은 다음과 같다:
- Android XR 1.0 — Android 14 기반의 XR 전용 OS. ARCore와 OpenXR을 표준으로 채택.
- Gemini Live 통합 — 공간 안에서 음성·시각 AI가 컨텍스트를 인식.
- Project Moohan — 삼성이 만드는 첫 Android XR 하드웨어. 2025년 후반 출시(미국 4,500달러대로 보도).
Galaxy XR HMD(상품명 미확정)의 알려진 사양:
- Snapdragon XR2+ Gen 2 또는 Gen 3.
- 마이크로 OLED, eye당 약 3,800×3,800.
- 손/눈 추적 탑재, 컨트롤러 옵션.
- visionOS와 유사한 패스스루 우선 UX.
2026년 봄 시점에서 Android XR은 아직 개발자 키트 단계지만, Google Play Store XR(가칭)이 베타로 열렸고, Unity·Unreal 양쪽이 Android XR 빌드 타겟을 지원하기 시작했다.
기억할 한 줄: Vision Pro와 Quest의 사이에 들어오는 게 Android XR의 포지셔닝이다.
5장 · Snap Spectacles 5와 Meta Orion — 진짜 AR 안경의 현실
지금까지 본 헤드셋은 모두 비디오 시스루(VST) — 카메라로 찍은 영상을 보여준다. 진짜 광학 시스루(OST) — 투명 디스플레이를 통해 현실을 직접 보면서 가상을 얹는 — 는 여전히 어렵다.
Snap Spectacles 5(2024년 9월, 개발자 전용 99달러/월 구독):
- WaveOptics 도파관(waveguide) 광학.
- 시야각 약 46도, 양안.
- Snap OS, Lens Studio로 개발.
- 무게 226g — 안경처럼 쓸 수 있는 첫 양산형.
Meta Orion(2024년 9월 Connect에서 프로토타입 공개):
- Meta가 10년 가까이 R&D 끝에 내놓은 풀 AR 안경 프로토타입.
- 실리콘 카바이드 도파관 + microLED.
- 시야각 70도(역대 최대급).
- 외부 컴퓨트 퍽(주머니용)과 EMG 손목 밴드.
- 2024년 시점에선 양산 가격이 약 1만 달러대로 너무 비싸 출시 보류. 2027~28년 양산형 목표.
XREAL One Pro(2024년 10월, 599달러):
- 버드배스(birdbath) 광학. 도파관보다 시야각 크고(57도) 밝지만, 광학 부피가 크다.
- USB-C로 폰·PC·Steam Deck에 직결되는 휴대 디스플레이.
- 2026년 시점 One Pro 2(가칭) 후속 루머 — 시야각 65도, AR-만 모드.
Rokid Max 2(2025년), Viture One, Nreal/XREAL Air 2 Pro(2024)도 같은 카테고리 — "AR 안경"이라기보단 휴대용 디스플레이 + 약한 AR.
기억할 한 줄: 2026년에도 "안경처럼 가볍고 시야각이 충분히 넓고 AR이 자연스럽다"는 셋을 동시에 만족하는 제품은 없다.
6장 · 엔진 1 · Unity 6 + PolySpatial — XR의 가장 넓은 길
XR 콘텐츠 제작에서 가장 많이 쓰이는 엔진은 여전히 Unity다. Quest, PSVR2, Vision Pro, Android XR, Pico — 거의 모든 헤드셋이 Unity SDK를 1순위로 지원한다.
Unity의 핵심 XR 스택:
- XR Interaction Toolkit (XRI) 3.x — 손 추적·컨트롤러·시선·텔레포트 등을 추상화한 상위 컴포넌트.
- OpenXR Plugin — Khronos OpenXR 1.1을 통해 Quest, Vive, Pico, Windows MR 등을 공통 API로.
- Apple visionOS XR Plugin + PolySpatial — Vision Pro 빌드용. PolySpatial이 RealityKit 백엔드에 Unity 씬을 매핑한다.
- AR Foundation — 모바일 AR(ARKit/ARCore)을 공통 API로.
Unity 6(2024년 10월, LTS) 이후 XR 측면 변화:
- GPU Resident Drawer + GPU Occlusion Culling — 드로우 콜·CPU 부담을 줄여 Quest 3에서 60% 가까운 렌더 가속.
- Adaptive Probe Volumes (APV) — 동적 글로벌 일루미네이션을 모바일 XR에서 쓸 만하게.
- Hybrid Rendering(URP) — 카메라 입력·VST와 렌더 결과를 합성하는 MR 전용 파이프라인.
Unity 6.1(2025년 4월)부터:
- Foveated Rendering Universal API — Quest, PSVR2, Vision Pro에 공통 API로.
- Spatial Anchors 2.0 — 클라우드 공유 가능한 영구 앵커.
가장 작은 Unity XR 입문 코드(C# 의사코드):
using UnityEngine;
using UnityEngine.XR.Interaction.Toolkit;
public class Grabbable : MonoBehaviour
{
private XRGrabInteractable grab;
void Start()
{
grab = GetComponent<XRGrabInteractable>();
grab.selectEntered.AddListener(OnGrab);
}
void OnGrab(SelectEnterEventArgs args)
{
Debug.Log($"Grabbed by {args.interactorObject.transform.name}");
}
}
Unity의 강점은 광범위한 타겟, 약점은 Vision Pro에서 RealityKit 네이티브 대비 한 단계 떨어진 머티리얼 표현력.
7장 · 엔진 2 · Unreal Engine 5.5/5.6 — 비주얼 우위의 진영
Unreal Engine은 XR에서 시각적 충실도가 가장 높다.
Unreal Engine 5.5(2024년 11월):
- Lumen + Nanite — 동적 글로벌 일루미네이션과 무한 폴리곤 메시. XR에서도 (성능 허용 한도 내) 작동.
- MetaXR Plugin — Meta가 직접 유지하는 Quest/Horizon OS용 플러그인.
- OpenXR 플러그인 안정화 — Vive, Pico, Windows MR을 공통 처리.
- Niagara — GPU 파티클, XR에서 비주얼 임팩트.
Unreal Engine 5.6(2025년 6월):
- Mobile Forward+ for XR — Quest 3 같은 모바일 XR에서 Lumen 일부를 흉내 내는 경량 GI.
- PixelStreaming for XR — 클라우드에서 렌더링한 결과를 헤드셋으로 스트림.
- MetaHuman Animator + XR — 페이셜 캡처 + 공간 페르소나.
Unreal의 약점: Vision Pro 공식 지원이 늦다. 2026년 5월 시점에 Vision Pro용 정식 빌드 타겟은 베타. 대신 PixelStreaming + Vision Pro Safari WebXR로 우회하는 패턴이 흔하다.
대표작:
- Half-Life: Alyx(2020, Source 2 — 비교 대상)
- Asgard's Wrath 2(2023, Quest, Unity)
- Batman: Arkham Shadow(2024, Quest 3, Camouflaj/Meta, Unreal)
- Metro Awakening(2024, PSVR2/Quest, Unity)
기억할 한 줄: Unity는 어디서나 돌고, Unreal은 어디서도 가장 예쁘다.
8장 · 엔진 3 · Apple RealityKit + Reality Composer Pro 2
Vision Pro를 최대치로 끌어내려면 RealityKit + Reality Composer Pro 2가 답이다. Swift/SwiftUI로 직접 짜고, USDZ 자산을 Reality Composer Pro로 합치는 워크플로.
RealityKit 2026의 핵심:
- MaterialX 통합 — 산업 표준 셰이딩 그래프를 RealityKit이 그대로 읽는다.
- Procedural Shaders v2 — Reality Composer Pro에서 노드 그래프로 셰이더를 짜고 visionOS에서 컴파일.
- Volume Effects — 입자, 안개, 폭발.
- Object Tracking — 실제 물체(USDZ 레퍼런스)를 인식해 그 위에 콘텐츠 고정.
- Multipeer Anchors — 같은 공간에서 여러 Vision Pro가 공유하는 앵커.
가장 작은 SwiftUI + RealityKit 코드:
import SwiftUI
import RealityKit
struct ImmersiveView: View {
var body: some View {
RealityView { content in
// 1. 빈 엔티티 트리
let root = Entity()
// 2. USDZ 모델 로드
if let scene = try? await Entity(named: "Cube") {
root.addChild(scene)
}
// 3. 라이팅
let light = DirectionalLight()
light.light.intensity = 4000
root.addChild(light)
content.add(root)
}
}
}
Reality Composer Pro 2(2025년 9월, Xcode 16.4 동봉):
- Shader Graph 2.0 — 노드 기반.
- Particle Emitter 시각 편집기.
- TabletopKit 컨테이너.
- USD ML Skeleton — RealityKit 스키닝 검증.
RealityKit의 강점: visionOS 네이티브 표현력 1등, 약점: Vision Pro 외 어디서도 안 돈다.
9장 · WebXR — 브라우저에서 도는 공간 컴퓨팅
설치 없이, 헤드셋에 내장된 브라우저로 즉시 들어가는 경험을 만들고 싶다면 WebXR.
핵심 스택:
- Three.js — 사실상 표준.
WebXRManager로 OpenXR 호출을 추상화. - Babylon.js — Microsoft 후원, XR 기본 지원 깊다.
- A-Frame — HTML 선언형. 입문용.
- PlayCanvas — 브라우저 IDE + WebXR.
- react-three-fiber + @react-three/xr — React 컴포넌트 모델.
가장 작은 react-three-fiber + XR 컴포넌트 의사코드:
import { Canvas } from '@react-three/fiber'
import { XR, createXRStore, VRButton } from '@react-three/xr'
const store = createXRStore()
export default function App() {
return (
<>
<VRButton store={store} />
<Canvas>
<XR store={store}>
<ambientLight intensity={0.6} />
<mesh position={[0, 1.5, -2]}>
<boxGeometry args={[0.3, 0.3, 0.3]} />
<meshStandardMaterial color="hotpink" />
</mesh>
</XR>
</Canvas>
</>
)
}
2026년 시점 WebXR 현실:
- Quest 3 브라우저 — 가장 잘 돈다. WebGPU도 안정.
- Vision Pro Safari — WebXR 일부 지원(visionOS 2.4부터), 손 추적 가능, 컨트롤러는 없다.
- PSVR2 PC — Steam VR 경유로 데스크톱 브라우저에서.
대표 사용처: VRChat 웹 로비, 박물관 가상 투어, 부동산 가상 투어, 교육 시뮬레이터.
10장 · OpenXR과 OpenUSD — 표준 두 기둥
XR이 파편화로 죽지 않으려면 표준이 필요하다. 두 가지가 핵심이다.
OpenXR (Khronos)
- 1.1(2024년) — 마이크로 LED 디스플레이 지원, 손 추적 API 표준화.
- 1.1.x(현재) — Foveated rendering 확장, 패스스루 카메라 직접 접근(권한 모델).
- 지원 헤드셋 — Quest 3/3S, Vision Pro(부분, RealityKit 우선), Vive, Pico, Windows MR, PSVR2 PC(Sony가 베타), Android XR.
OpenUSD (Pixar + Apple + NVIDIA + Disney + Adobe)
- Pixar의 USD가 Universal Scene Description 표준으로 합류.
- Apple Vision Pro는 USDZ를 자산 포맷으로 채택.
- NVIDIA Omniverse, Adobe Substance, Maxon Cinema 4D, Autodesk Maya — 다 USD를 표준 교환 포맷으로.
- 2024년 Linux Foundation 산하 AOUSD(Alliance for OpenUSD) 결성.
기억할 한 줄: 하드웨어는 OpenXR로, 자산은 OpenUSD로 — 이게 2026년의 베팅이다.
11장 · 공간 입력 — 손, 눈, 몸, 컨트롤러, 음성
XR이 일반 컴퓨터와 다른 가장 큰 차이는 입력 모달리티가 다양하다는 점이다.
손 추적(Hand Tracking)
- Quest 3 — 25개 관절, 30Hz. 핀치, 시선+핀치, 두 손 제스처.
- Vision Pro — 25관절, 60Hz. 카메라 6대로 정확도가 가장 높다. 외부 컨트롤러 없이 시선+핀치만으로 OS 운용.
- Snap Spectacles 5 — 손바닥 추적, 도파관 시야각 안에서만.
눈 추적(Eye Tracking)
- Vision Pro — 모든 IR 카메라가 동공·각막을 추적해 시선 광선을 만든다. Look-and-tap의 핵심.
- Quest Pro / Quest 3S에는 없음. Quest 3는 부분 추정.
- PSVR2 — 시선으로 Foveated rendering. 게임에 활용.
몸 추적(Body Tracking)
- Quest 3 —
Body Tracking API로 상체 추적(상반신 18개 관절). - VRChat 풀바디 — Vive 트래커, Tundra Labs, Sony Mocopi.
- Sony Mocopi(2023, 일본 발매) — 6개 IMU를 몸에 붙여 모션 캡처. VRChat·Cluster·Spatial.io 호환.
컨트롤러
- Quest Touch Plus(Quest 3) — 트래킹 링 제거, 손 추적 함께 활용.
- PSVR2 Sense — 햅틱 + 어댑티브 트리거 + 정전식 손가락 감지.
- Vision Pro — 공식 컨트롤러 없음. 2025년 PSVR2 Sense 호환 베타.
음성
- Quest 3 Voice — Meta AI(Llama 기반) 연동.
- Vision Pro Siri + Apple Intelligence.
- Android XR + Gemini Live — 가장 깊게 통합.
12장 · 공간 오디오 — 머리에 잠긴 소리 vs 세계에 잠긴 소리
XR에서 오디오는 헤드-락(head-locked) 과 월드-락(world-locked) 으로 나뉜다.
- 헤드-락 — 머리가 돌아도 소리가 머리 기준으로 따라온다. UI 알림음 같은 것.
- 월드-락 — 소리가 공간의 특정 위치에 박혀 있다. 머리를 돌리면 소리도 그쪽에서 들린다.
핵심 표준·기술:
- Apple Spatial Audio — Apple Music, FaceTime, Vision Pro 시스템 전반. Dolby Atmos 포함.
- MPEG-H 3D Audio — 표준화된 오브젝트 기반 오디오, 한국 KBS·일본 NHK가 방송에 도입.
- Dolby Atmos for VR — 오브젝트 기반, 게임에 활용.
- Steam Audio (Valve) — 무료 SDK, 머신러닝 기반 HRTF.
- Oculus Audio SDK / Meta XR Audio SDK — Quest 전용 공간 오디오.
Unity·Unreal 양쪽에서 공간 오디오를 켜는 건 머티리얼 한 줄과 비슷한 수준으로 단순해졌지만, HRTF(머리 관련 전달 함수)의 개인화는 여전히 어려운 분야다.
13장 · 공간 비디오 — iPhone에서 찍고 Vision Pro로 본다
2023년 iPhone 15 Pro부터 공간 비디오(spatial video) 촬영이 가능해졌다. 두 개의 카메라(메인 + 초광각)를 동시에 써서 좌·우 시점을 1080p/30fps로 기록한다.
- iPhone 15 Pro/Max — 1080p/30fps.
- iPhone 16 Pro/Max — 1080p/60fps.
- iPhone 17 Pro / Air — 4K/30fps.
재생 측:
- Vision Pro — 사진 앱에서 자동 인식, 풀 입체로 재생.
- Quest 3 — Apple 호환 모드(앱), 또는 Meta의 자체 포맷으로 변환.
- YouTube VR — 2025년 공간 비디오 업로드 지원.
공간 사진(Spatial Photo) — visionOS 2부터 일반 평면 사진도 ML 깊이 추정으로 공간 사진으로 변환 가능.
14장 · 3D 모델링 — Blender, Maya, Cinema 4D, Houdini, RCP 2
XR 콘텐츠의 모델은 어디서 오는가:
- Blender 4.4 / 4.5(2025-2026) — 무료, 사실상 표준 입문 도구. USDZ 익스포트 안정화. Geometry Nodes로 절차적 모델링.
- Autodesk Maya 2026 — 대형 스튜디오의 캐릭터·애니메이션 표준.
- Maxon Cinema 4D 2026 — 모션 그래픽 강점. Redshift 렌더러.
- SideFX Houdini 20.5 — 절차적 모델링·VFX. USD 네이티브.
- Autodesk 3ds Max — 건축 시각화 강점.
- Pixologic ZBrush + Maxon ZBrush 2026 — 디지털 스컬프팅.
XR 전용 도구:
- Reality Composer Pro 2 — visionOS 자산 검증·셰이더·파티클 합성.
- Adobe Substance 3D — 텍스처링·머티리얼 표준.
- Quixel Megascans (Fab) — Epic이 무료로 풀고 Fab으로 통합.
- NVIDIA Omniverse — USD 협업 허브, Kit 105+.
AI 3D 생성:
- Meshy 5 — 텍스트→메시, PBR 텍스처 포함.
- Tripo 3D — 이미지·텍스트→메시.
- Rodin — 캐릭터 특화.
- Luma AI Genie + Dream Machine 3D — 캡처 + 생성.
- NVIDIA GET3D / Edify 3D — 연구 → 상용화 진행 중.
15장 · 자산 스토어와 마켓플레이스
- Unity Asset Store — 130만+ 자산. XR 인터랙션 키트.
- Epic Fab(2024년 출시) — Quixel + Marketplace + ArtStation Marketplace + Sketchfab 통합한 단일 마켓.
- Sketchfab — 무료/유료 글로벌 3D 자산.
- TurboSquid — 전통적 3D 마켓.
- Adobe Stock 3D — Substance와 연동.
XR 헤드셋 콘텐츠 스토어:
- Meta Horizon Store — Quest용.
- Apple App Store on visionOS — Vision Pro용.
- Steam VR — PC VR(Index, Vive, Quest Link).
- PlayStation Store — PSVR2.
- App Lab(Quest) — 베타·인디 채널.
- SideQuest — 비공식 인디.
16장 · 대표 VR/AR 앱과 게임 — 2026년 매출 상위
소셜·게임 측면에서 누가 살아남았나:
- VRChat — 누적 사용자 수억, 일본·한국에서 가장 큰 VR 소셜.
- Rec Room — 모바일·콘솔·VR 크로스플랫폼 소셜.
- Roblox VR — 2024년 Vision Pro 공식 출시.
- Spatial.io — 가상 갤러리·이벤트, B2B 강세.
- Beat Saber — 누적 1억 곡 판매 돌파, 여전히 Quest의 1번 앱.
- Half-Life: Alyx — PC VR의 사실상 레퍼런스(2020년이지만 여전).
- Asgard's Wrath 2 — Quest 시그니처 RPG.
- Batman: Arkham Shadow — Quest 3 전용, 2024 GOTY VR.
- Metro Awakening — PSVR2/Quest, 2024.
- Resident Evil 4 VR Mode(PSVR2).
- Gran Turismo 7 VR(PSVR2 시그니처).
생산성·실용:
- Immersed — Vision Pro/Quest 동시 지원, 가상 모니터 5개까지.
- Virtual Desktop — PCVR 무선 스트리밍의 표준.
- Horizon Workrooms — Quest 회의실.
- Apple Freeform / Notes / Safari on visionOS — 일상 도구.
17장 · 엔터프라이즈 XR — 훈련, 시뮬레이션, 디자인 리뷰
소비자 헤드셋과는 다른 시장이 있다. 산업·국방·의료.
- Varjo XR-4 (핀란드, 5,990달러+) — 인간 시각 한계급 4K per eye. 비행·외과·자동차 시뮬레이션.
- Microsoft HoloLens 2 — 2024년 신규 판매 종료. 기존 산업 고객은 2027년까지 지원.
- Magic Leap 2 — 의료·국방. 광학 시스루.
- ThirdEye X2 — 산업용 OST.
- RealWear Navigator — 헬멧 통합형, 현장 작업자용.
전형적 사례:
- Boeing 항공기 정비 — Vision Pro + 커스텀 앱으로 정비 매뉴얼 오버레이.
- Mercedes-Benz 디자인 리뷰 — Varjo XR-4로 클레이 모델 위에 디지털 페인트.
- Mayo Clinic 수술 시뮬레이션 — Magic Leap 2.
- Walmart 트레이닝 — Quest 3, 직원 1,000만 시간 누적.
18장 · 클라우드 렌더링 — NVIDIA CloudXR, PixelStreaming
헤드셋 안의 모바일 GPU(Snapdragon XR2 Gen 2)로는 한계가 있는 그래픽을 어떻게 해결하나?
- NVIDIA CloudXR — 클라우드 GPU에서 렌더 → 5G/Wi-Fi 6/7로 헤드셋에 스트림.
- Unreal PixelStreaming — 같은 개념을 Unreal Engine 5.x로.
- Holo-Light — 산업용 클라우드 XR 스트리밍.
- Pixyz — CAD → XR 자동 변환 파이프라인.
- Meta XR Cloud Streaming — Horizon OS용 베타.
지연시간(latency) 예산:
- 헤드셋 내부 렌더링: 모션-투-포톤 ~20ms.
- 클라우드 + 5G:
4060ms(좋은 환경). - 클라우드 + Wi-Fi 6E + LAN:
3040ms.
기억할 한 줄: 클라우드 렌더링은 시야가 빠르게 안 움직이는 산업 시뮬레이션에 잘 맞고, 액션 게임에는 여전히 어렵다.
19장 · 한국 시장 — Naver Z, Kakao, NHN Cloud, LG U+
한국에서 XR은 메타버스 1차 거품 이후 살아남은 플레이어가 누구냐가 관건이었다.
- Naver Z / ZEPETO — Z세대 글로벌 4억+ 사용자. 모바일 중심이지만 Vision Pro·Quest 3 앱 출시(2024).
- Kakao Spatial — Kakao Brain의 공간 컴퓨팅 R&D.
- NHN Cloud VR — B2B 가상 콘퍼런스·전시.
- LG U+ U+VR Studio — 통신사의 VR 콘텐츠 스튜디오, 5G 결합.
- 삼성전자 Galaxy XR / Project Moohan — 한국이 글로벌 헤드셋의 한 축이 되는 첫 진지한 시도(2025년 후반).
- 카카오게임즈 KartRider VR(개발 중) — Quest 호환.
학계·연구:
- KAIST UVR Lab, POSTECH GFX Lab.
- ETRI 공간 컴퓨팅 사업단.
- 서울대 인공지능대학원의 XR + AI 연구.
20장 · 일본 시장 — Sony, Cluster, VRChat 일본 커뮤니티, Vket
- Sony PSVR2 + PSVR2 PC 호환(2024년 8월) — PS5 전용에서 PC로 확장하며 점유율 회복.
- Cluster — 일본 토종 메타버스 플랫폼. 2025년 MAU 800만 돌파.
- VRChat 일본 커뮤니티 — 아바타 문화·이벤트의 본진.
- Vket(Virtual Market) — 세계 최대 VR 전시·마켓 이벤트, 매년 두 번.
- Pixiv VRoid Studio — 아바타 제작 표준 도구.
- Niantic + 닌텐도(소문) — 위치 기반 AR 협업.
일본은 소셜 VR 측면에서 세계에서 가장 활발한 시장이다. VRChat 사용자의 40% 가까이가 일본어를 1차 언어로 한다.
21장 · 학습 경로 — 어디부터 시작하나
5가지 트랙으로 정리.
트랙 1 · Quest 3로 인디 게임 만들기
- Quest 3 또는 3S 구입.
- Unity 6 LTS 설치, XR Interaction Toolkit + OpenXR + Meta XR SDK.
BNG VR Framework같은 시작 키트로 한 달 안에 첫 빌드.- SideQuest → App Lab → Horizon Store.
트랙 2 · Vision Pro 앱 만들기
- Mac + Xcode 16+ + visionOS 2 SDK.
- Swift/SwiftUI + RealityKit 학습.
- Reality Composer Pro 2로 USDZ 자산 합성.
- TestFlight → App Store.
트랙 3 · WebXR로 빠른 프로토타입
- Three.js + WebXR + Vite.
- Quest 3 브라우저로 즉시 테스트.
- Vercel/Netlify 배포 → 헤드셋 브라우저에서 접속.
트랙 4 · 3D 아티스트
- Blender 4.5(무료) 입문.
- USDZ/glTF 익스포트 익숙해지기.
- Substance 3D 텍스처링.
- Sketchfab·Fab에 포트폴리오 업로드.
트랙 5 · 엔터프라이즈 XR
- Varjo·Magic Leap 같은 산업 헤드셋 경험.
- Unity Industry / Unreal Enterprise.
- PTC Vuforia, Reflekt One 같은 산업용 AR.
- CAD → USD 파이프라인.
22장 · 함정과 안티패턴
XR 개발에서 흔히 빠지는 함정.
- 멀미 무시. 60fps는 최소, 가급적 90fps. 강제 카메라 이동, 갑작스러운 가속은 멀미의 1순위 원인.
- 드로우 콜 과다. Quest 3는 약 200~300 드로우 콜이 안전 한계. 그 이상이면 프레임 드롭.
- 거대 텍스처. 4K 텍스처는 헤드셋 메모리에 큰 부담. 1K~2K로 최적화.
- UI를 평면으로만. 공간 컴퓨팅의 핵심은 6DOF UI다. 평면 UI만 띄우면 일반 모니터를 가까이 두는 것과 같다.
- 두 손을 다 쓰게 강요. 손이 피로하다(
gorilla arm). 짧은 세션, 휴식, 시선·음성 보조. - 외부 컨트롤러 가정. Vision Pro에는 없다. Android XR은 옵션. 시선·핀치·음성으로도 작동하게.
- 공간 텍스트 가독성. 0.5m 거리에서 작은 글씨는 안 읽힌다. 1m 기준 24pt 이상.
23장 · 비교 매트릭스 — 어떤 헤드셋에 어떤 엔진?
| 헤드셋 | 가격대 | OS | 1순위 엔진 | 입력 | 특징 |
|---|---|---|---|---|---|
| Vision Pro | 3,499달러 | visionOS | RealityKit | 시선+핀치 | 1등 디스플레이·1등 가격 |
| Quest 3 | 499달러 | Horizon OS | Unity / Unreal | 손+컨트롤러 | 가성비 1등 |
| Quest 3S | 299달러 | Horizon OS | Unity / Unreal | 손+컨트롤러 | 입문 |
| PSVR2 | 549달러 | PS5 OS / PC SteamVR | Unreal / Unity | Sense 컨트롤러 | PS5 게이밍 |
| Pico 4 Ultra | 600~700달러 | Pico OS | Unity | 손+컨트롤러 | 중국·아시아 |
| Vive XR Elite | 1,099달러 | Vive Wave | Unity / Unreal | 손+컨트롤러 | 엔터프라이즈 |
| Varjo XR-4 | 5,990달러+ | Varjo OS | Unity / Unreal | 컨트롤러 | 산업 시뮬레이션 |
| Magic Leap 2 | 3,299달러 | Magic Leap OS | Unity / WebXR | 손+컨트롤러 | 의료·국방 OST |
| Snap Spectacles 5 | 99달러/월 | Snap OS | Lens Studio | 손 | 진짜 AR 도전 |
24장 · 2026년 ~ 2027년 전망
- Vision Pro 2 — 더 가볍게, 더 싸게(1,800~2,000달러). 2026년 말 또는 2027년 초.
- Quest 4 / Quest Pro 2 — 안 나올 가능성이 더 높음. Meta는 가격을 낮추는 방향.
- Android XR 양산화 — 삼성·구글이 2026~27에 본격적인 판매 시작.
- Snap Spectacles 6 — 더 가벼운 AR 안경.
- Meta Orion 양산형 — 2027~28 목표.
- Apple AR Glasses — 2027~2028 루머. Vision Pro 라인과 별도.
- WebGPU + WebXR — 브라우저 공간 컴퓨팅이 한 단계 더.
- AI + 공간 — 모든 헤드셋에 멀티모달 LLM(Gemini, Apple Intelligence, Meta AI)가 표준.
- 공간 비디오 표준화 — MV-HEVC 외 새로운 코덱 후보.
기억할 한 줄: 2026년은 "Vision Pro 1세대의 끝, 2세대의 시작, Android XR의 등장, AR 안경의 양산 시도"가 동시에 일어나는 해다.
25장 · 마치며 — 헤드셋은 아직 휴대폰을 대체하지 않았지만
2024년 Vision Pro 출시 직후 "이게 제2의 iPhone이다"라는 말이 있었다. 2026년 시점, 그 말이 아직 옳지 않다는 건 명백하다.
하지만 동시에, 공간 컴퓨팅이 사라지지도 않았다. Quest 3는 일상의 게임 콘솔이 됐고, Vision Pro는 작업·생산성의 새 카테고리를 열었고, Android XR이 합류했고, Snap·Meta가 진짜 AR 안경에 도전 중이다. WebXR이 설치 없는 즉시 접근을 가능하게 하고, OpenXR과 OpenUSD가 파편화의 위험을 누른다.
지금 XR에 들어오기에 가장 좋은 이유는, 표준이 자리 잡혔고, 하드웨어가 두 가격대(300달러대, 3,500달러대)로 양극화됐으며, 엔진 두 개(Unity·Unreal)와 OS 세 개(visionOS·Horizon·Android XR)만 알면 시장의 90%를 커버할 수 있기 때문이다.
남은 건 콘텐츠다. 거기에 들어갈 사람이 필요하다.
참고 자료
- Apple visionOS Developer — https://developer.apple.com/visionos/
- Apple RealityKit — https://developer.apple.com/documentation/realitykit
- Reality Composer Pro — https://developer.apple.com/augmented-reality/tools/
- Meta Quest Developer — https://developer.oculus.com/
- Meta Horizon OS — https://www.meta.com/horizon-os/
- Google Android XR — https://www.android.com/xr/
- Khronos OpenXR — https://www.khronos.org/openxr/
- Alliance for OpenUSD — https://aousd.org/
- Unity XR Documentation — https://docs.unity3d.com/Manual/XR.html
- Unity PolySpatial for visionOS — https://docs.unity3d.com/Packages/com.unity.polyspatial@2.0/
- Unreal Engine XR — https://dev.epicgames.com/documentation/en-us/unreal-engine/xr-development-in-unreal-engine
- Three.js WebXR — https://threejs.org/docs/#manual/en/introduction/How-to-create-VR-content
- Babylon.js WebXR — https://doc.babylonjs.com/features/featuresDeepDive/webXR/
- A-Frame — https://aframe.io/
- Snap Spectacles — https://www.spectacles.com/
- XREAL — https://www.xreal.com/
- Varjo — https://varjo.com/
- Magic Leap — https://www.magicleap.com/
- Sony PSVR2 — https://www.playstation.com/en-us/ps-vr2/
- HTC Vive — https://www.vive.com/
- Pico XR — https://www.picoxr.com/
- VRChat — https://hello.vrchat.com/
- Cluster — https://cluster.mu/
- ZEPETO — https://zepeto.me/
- Blender — https://www.blender.org/
- NVIDIA Omniverse — https://www.nvidia.com/en-us/omniverse/
- Steam Audio — https://valvesoftware.github.io/steam-audio/
- NVIDIA CloudXR — https://developer.nvidia.com/cloudxr-sdk