TelleR가 만드는 Once Upon, Inc.는 문명이 무너졌다 다시 일어선 먼 미래를 배경으로 한 4인 협동 VR 게임이다. 플레이어는 동화 복원 공기업의 QA 인턴이 되어, 회사가 복원한 이야기가 처음부터 끝까지 제대로 진행되는지 동화 속에 직접 들어가 검사한다.

복원된 동화는 원본처럼 보이지만 어딘가 자신 있게 틀려 있다. Stop Eating the Herb에서는 네 명의 빨간 망토가 숲의 거의 모든 것을 먹으며 늑대를 상대하고, 금지된 허브를 먹는 순간 게임 전체가 초기화된다. Jarl and the Beandrasil에서는 잭 대신 바이킹 소년 Jarl이 콩그드라실을 타고 서리 거인의 세계를 약탈한다.

짧은 플레이 안에 협동, 실수와 트롤링이 연달아 생기는 프렌드라이크 옴니버스다. 공동 목표를 따라가다가 한 사람의 선택으로 동화 전체가 엉키고, 그 실패가 다시 친구들과 공유할 웃긴 장면이 된다.

잘못 복원된 동화에 QA 인턴으로 들어가는 4인 협동 VR 게임

TelleR / Once Upon, Inc.

사람의 움직임을 실시간으로 읽어 3D 캐릭터에 전달하는 여러 모션 캡처 방식을 비교했다. 광학식과 관성식 장비부터 Vive Tracker와 카메라를 이용한 방식까지 직접 다루며, 촬영 환경과 장비 구성에 따라 결과가 어떻게 달라지는지 살폈다.

캡처한 움직임은 캐릭터 리깅과 Unreal Engine 작업으로 연결했다. 몸의 동작을 자연스럽게 옮기기 위한 세팅, 촬영, 보정 과정을 하나의 제작 흐름으로 다듬었고, 이 경험은 이후 Virtual Production과 합쳐졌다.

사람의 움직임을 디지털 캐릭터에 옮기는 모션 캡처 연구

Motion Capture

Unreal Engine으로 만든 가상 공간 안에서 아바타와 카메라를 움직이며 영상을 제작했다. 모델링, 아바타, 모션 캡처, 촬영을 나눠 맡고 각 작업물이 한 장면 안에서 자연스럽게 만나는 제작 방식을 실험했다.

Blender와 Substance Painter로 공간과 오브젝트를 만들고, Perforce로 대용량 에셋을 함께 관리했다. 짧은 뮤직비디오 장면을 완성하며 가상 제작의 전 과정을 경험했고, 이후 Motion Capture와 하나의 Virtual Production 팀으로 합쳐졌다.

실시간 3D 엔진으로 가상 공간과 촬영을 결합한 영상 제작 프로젝트

Virtual Production

2기에 따로 출발한 Motion Capture와 Virtual Production의 연구를 하나로 합쳤다. 사람의 움직임, 가상 공간, 실시간 엔진과 카메라가 한 제작 환경에서 만나는 방식을 다룬다.

버추얼 프로덕션이 기존 영상 제작의 촬영과 수정 과정을 어떻게 바꾸는지 사례와 워크플로를 중심으로 살폈다. 기술을 개별적으로 익히는 단계에서 벗어나 전체 제작 흐름을 이해하는 데 집중했다.

모션 캡처와 실시간 영상 제작을 하나로 묶은 버추얼 프로덕션 연구

평면 화면의 UX 원칙을 그대로 옮기는 대신, 사용자가 공간 안에서 보고 움직이고 손을 뻗는 방식부터 다시 살폈다. XR의 깊이감과 몰입감이 행동과 판단에 어떤 차이를 만드는지 연구 질문으로 구체화했다.

문헌 연구에서 출발해 실험용 프로토타입을 만들고 참가자 테스트와 데이터 분석까지 이어갔다. 결과는 페이퍼와 포스터로 정리해 학술 발표로 확장했으며, 이 연구 흐름은 4기부터 UXR Lab으로 이어졌다.

XR의 공간성과 신체 상호작용을 사용자 연구로 검증한 프로젝트

UX Project

XR 공간에서의 다양한 사용자 경험(UX)에 대해 탐구하고 연구. XR 기술을 빠르게 팔로우업하며 디자인적 관점으로 업계를 꾸준히 파악합니다. 사용자 친화적인 단단한 접근 방식을 연구하고 검증하여, 유의미한 사용성 데이터를 축적합니다.

XR 공간에서의 다양한 사용자 경험(UX)에 대해 탐구하고 연구

UXR LAB

UXR Lab

Houdini의 노드 기반 작업 방식을 이용해 형태와 효과를 절차적으로 만드는 방법을 연구했다. 결과를 한 번 만들고 끝내는 대신, 수치와 규칙을 바꿔 여러 변형을 빠르게 생성하는 데 초점을 맞췄다.

파티클, 시뮬레이션, 프로시저럴 모델링을 작은 예제로 익히고 이를 XR 장면에 적용했다. 무거운 효과를 실시간 환경에 맞게 단순화하고 다른 제작 도구로 넘기는 과정도 함께 다뤘다.

Houdini로 절차적 모델링과 시각효과를 익힌 VFX 프로젝트

VFX - Houdini

온라인 미디어가 현실을 침식하고 두 세계의 경계가 흐려지는 감각을 VFX와 뉴미디어아트로 표현했다. 기술 시연보다 작품의 주제와 장면이 먼저 보이도록 Houdini의 시뮬레이션과 영상 합성을 사용했다.

2기에는 도구와 제작 기법을 익혔다면, 3기에는 각자의 VFX 연구를 하나의 작품 언어로 모았다. 디지털 이미지와 현실의 관계를 공동 작품과 영상 컴포지션으로 풀어냈다.

VFX 기술을 인터랙티브 뉴미디어 작품으로 확장한 프로젝트

VFX New Media Art

방의 크기와 구조가 갑자기 달라지고, 사물이 물리 법칙을 벗어나는 VR 방탈출 게임이다. 익숙한 방탈출의 단서 찾기와 퍼즐 풀이를 유지하면서도 현실 공간에서는 만들기 어려운 장면 전환을 핵심 재미로 삼았다.

플레이어가 주변을 관찰하고 손으로 사물을 조작하며 다음 공간을 여는 흐름을 설계했다. 퍼즐의 규칙과 서사가 따로 놀지 않도록 단서, 오브젝트, 공간 변화를 하나의 장면 안에 배치했다.

현실에서는 불가능한 공간 변화를 활용한 VR 방탈출 게임

Xscape

OVR은 Oculus 기반 VR 개발에 쓰이는 Oculus Integration을 내부 구조부터 살펴본 기술 프로젝트다. 준비된 기능을 가져다 쓰는 데서 멈추지 않고, 프리팹과 클래스가 어떤 역할을 맡고 서로 어떻게 연결되는지 분석했다.

Unity와 C#으로 핵심 기능을 작은 데모로 구현하고, 다른 XR 프로젝트에서도 다시 사용할 수 있도록 SDK의 흐름을 정리했다. 입력과 상호작용을 이해하는 데 필요한 기반 지식을 팀 안에 쌓은 프로젝트다.

Oculus Integration의 구조와 사용법을 분석한 VR 기술 연구

360도 카메라로 VR 독립영화를 만들었다. 시나리오와 스토리보드에서 시작해 배우, 장소와 소품을 준비하고 촬영과 편집, 상영까지 한 편의 영상 제작을 끝까지 이어 갔다.

관객이 장면 안을 자유롭게 둘러본다는 점을 연출에 반영했다. 촬영 전에 카메라 테스트를 거치고, 일반 영상과 다른 시선 처리와 공간 구성을 본 촬영에 적용했다.

360도 공간 안에서 이야기와 시선을 설계한 영상 제작 프로젝트

360 Contents

360 Contents에서 다룬 공간 연출에 사용자의 선택과 반응을 더했다. 관객이 장면을 바라보는 데서 끝나지 않고, 행동을 통해 이야기의 리듬과 정보의 순서를 바꾸는 콘텐츠를 제작했다.

레퍼런스 분석, 경험 구조 설계, 프로토타입 제작, 플레이 테스트를 반복하며 상호작용이 서사를 방해하지 않고 오히려 이해를 돕도록 다듬었다.

이야기와 상호작용을 함께 설계한 인터랙티브 콘텐츠 제작 프로젝트

Interactive Contents Production

체스판과 말의 규칙을 거대한 미로형 공간으로 바꾼 VR 게임이다. 플레이어는 체스 말의 움직임과 공간에 숨은 단서를 이용해 길을 찾고 퍼즐을 해결한다.

익숙한 체스의 형태를 크기와 시점이 뒤틀린 장면으로 재구성해, 보드게임을 직접 걸어 다니는 듯한 경험을 만든다. 이동, 관찰, 오브젝트 조작이 하나의 퍼즐 풀이로 이어진다.

초현실적인 체스 세계를 탐험하는 VR 퍼즐 게임

ChessMaze

Unity의 렌더링 파이프라인과 셰이더 구조를 익히고, 물체의 표면과 빛이 보이는 방식을 직접 만들었다. 단순한 재질 표현부터 왜곡, 발광, 디졸브처럼 상호작용에 반응하는 효과까지 다뤘다.

시각효과가 몰입을 높이면서도 XR 기기에서 안정적으로 동작하도록 연산량과 표현 방식을 조절했다. 이 흐름은 이후 Graphics 팀의 셰이더·VFX 연구로 이어졌다.

Unity 셰이더로 XR 장면의 표면과 빛을 설계한 그래픽 프로젝트

Unity Shader

XR 환경에 적용할 수 있는 Shader, VFX 연구 및 개발. 그래픽스 파이프라인과 렌더링에 대한 전반적인 이해를 바탕으로 최적의 데브-디자인 워크플로우를 구축하고 유저 몰입도를 높일 수 있는 다양한 렌더링 기법을 연구합니다.

XR 환경에 적용할 수 있는 Shader, VFX 연구 및 개발

Graphics

버추얼 캐릭터 Dana의 외형과 설정을 만들고, 캐릭터가 등장하는 소셜 콘텐츠와 게임을 함께 제작했다. 3D 모델 하나로 끝내지 않고 이야기와 활동을 가진 인물로 발전시켰다.

모델링과 리깅, 애니메이션을 Unity 작업으로 연결했고 홍보 이미지와 Dana 소개 콘텐츠도 같은 캐릭터성을 유지하도록 구성했다. Dana가 등장하는 게임 Princess Savior까지 제작 범위를 넓혔다.

사람처럼 보이고 반응하는 디지털 휴먼을 연구한 프로젝트

Virtual Human

대학생 학회/동아리를 위한 3D 메타버스 플랫폼. 음성/영상채팅, 스티키노트, 캘린더 기능을 통해 가상회의를, 다양한 미니게임 컨텐츠를 통해 네트워킹을 즐길 수 있습니다.

Youtube

대학생 학회/동아리를 위한 3D 메타버스 플랫폼

XTOWN

XVerse는 대학생 학회와 동아리를 위한 3D 커뮤니티 플랫폼 XTOWN의 다음 이름이다. 구성원들이 같은 가상 공간에 모여 이야기하고 활동하는 경험을 Unity 기반으로 이어 갔다.

Unity 2021과 C#을 중심으로 멀티플레이 공간의 구조를 다듬고, 파트와 클래스 단위로 개발 영역을 나눴다. 1·2기 XTOWN의 방향을 3기 팀이 이어받아 XVerse로 발전시켰다.

여러 가상세계를 연결하는 메타버스 플랫폼 실험

XVerse

새로운 기기를 어떻게 구현할지보다, XR이 사람의 관계와 정체성, 창작 방식에 어떤 변화를 만드는지 질문했다. 메타버스와 가상 경험을 예술과 사회철학의 관점에서 읽고 서로의 주제를 토론했다.

각자의 연구를 글과 시각 작업으로 발전시키고 갤러리 형태로 묶었다. 기술을 사용하는 사람과 그 기술이 놓인 사회까지 함께 바라본 초기 연구 팀이다.

XR과 메타버스를 예술·사회·철학의 관점에서 탐구한 연구 프로젝트

AxRT

끝을 알 수 없는 바다를 배경으로 한 VR 공포 게임이다. 플레이어는 제한된 시야와 소리에 의지해 주변을 탐색하고, 흩어진 단서를 모아 바다에 숨은 사건을 추적한다.

공간음향과 어두운 환경, 갑작스러운 거리 변화를 이용해 눈앞의 위협보다 보이지 않는 영역에서 긴장을 만든다. Unity 기반의 상호작용과 3D 공간 연출을 결합했다.

미지의 바다에서 단서를 찾는 VR 공포 게임

LGVR

악몽이 덮친 세상 속 MORPHAI와 샤르도네의 꿈을 테마로 한 VR 퍼즐 방탈출 장르의 게임. 몽환적 분위기 속에서 샤르도네가 되어 일그러진 꿈을 되돌리고, 꿈의 관리자 MORPHAI의 비밀에 다다르세요.

악몽이 덮친 세상 속 MORPHAI와 샤르도네의 꿈을 테마로 한 VR 퍼즐 방탈출

MORPHAI

Masterpiece는 평면으로 보던 명화를 직접 걸어 다닐 수 있는 공간으로 바꾼 게임이다. 작품의 구도와 색, 상징을 맵과 장면 안에 옮겨 플레이어가 그림 속에 들어온 듯한 감각을 만든다.

스토리와 퍼즐은 명화의 요소와 연결되고, 탐색할수록 작품의 분위기와 이야기가 드러난다. Unity 기반 게임 개발과 3D 공간 디자인을 결합해 XMC 발표용 결과물로 완성했다.

명화 속 공간을 직접 탐험하고 퍼즐을 푸는 게임 프로젝트

Masterpiece

참여자의 행동 데이터를 활용하여 개개인의 꿈을 담은 꽃을 VR에서 제작하고 관람할 수 있는 '경험 가능한 실질적인 메타버스 콘텐츠' 구현. Monthly CAVE xX 공모전에 나가 수상하였으며, 5-6월 한 달 동안 TheCAVE에서 전시

참여자의 행동 데이터로 개인의 꿈을 담은 꽃을 VR에서 제작하고 관람하는 메타버스 콘텐츠

SEE:REAL

권력자에게 색채를 빼앗길 위기에 처한 세상, 우리의 색깔을 되찾자! 색의 공급이 멈추고, 화면 렌더링 속도가 느려져 버려질 위기에 처한 컴퓨터 게임 'Blackout'! 오로지 이 게임만을 위한 특별한 컨트롤러와 함께 권력자를 물리쳐 세계를 구해보세요.

권력자에게 색채를 빼앗길 위기에 처한 세상, 우리의 색깔을 되찾자!

Palette

VR에 최적화된 악기를 고안하여 가상현실에서 합주를 할 수 있는 플랫폼을 만드는 프로젝트. 악보를 리듬게임 노트화하여 누구든지 부담 없이 쉽고 재미있게 악기 연주 생활을 즐길 수 있는 소셜 서비스 개발, 상용화를 목표

VR에 최적화된 악기를 고안하여 가상현실에서 합주를 할 수 있는 플랫폼

BandLab

Band Lab

버튜버와 소통하고 팬게임을 나눌 수 있는 멀티플레이어 게임 제작 및 공유 플랫폼입니다. 블록 코딩, 실시간 에셋 공유, 월드 에딧가 가능한 멀티플레이 게임 공간(서브버블)을 활용하여 비슷한 관심사를 가진 팬과 함께 게임을 같이 플레이하거나 함께 개발할 수 있습니다.

버튜버와 소통하고 팬게임을 나눌 수 있는 멀티플레이어 게임 제작 및 공유 플랫폼

XBlocks

XM.verse

메타버스의 가상 공간을, '가상' 공간이 아닌 가상 '공간'으로 보기 위한 프로젝트. 가상의(V) 모든 공간을(E) 단 하나로(AO) a.k.a Virtual thing Everywhere All at Once는 가상 공간을 '가상' 공간으로 대하지 않습니다. 우리는 가상 '공간'으로 바라봅니다.

메타버스의 가상 공간을, '가상' 공간이 아닌 가상 '공간'으로 보기 위한 프로젝트

V.E.A.O

V.E.A.O.

구성원의 창의력과 축적 가능한 가상 공간 데이터들을 활용하여 각자의 작업에 '이유'와 '근거'를 만들어 가져갈 수 있는 어시스트 전문 자유연구 프로젝트

가상 공간 데이터를 활용한 자유연구 프로젝트

리즌메이커

AI가 만든 시나리오를 실제로 체험할 수 있는 VR 장면으로 옮겼다. 텍스트로 끝나는 생성 결과를 공간, 캐릭터, 사용자의 선택으로 풀어내며 사람이 개입할 지점을 찾았다.

빠르게 만든 장면을 공개 세션에서 함께 체험하고, 이야기의 이해도와 상호작용의 재미를 바탕으로 다음 버전을 다듬었다.

AI로 만든 이야기와 VR 공간을 결합한 실험 프로젝트

아고라

VR이 아닌, 새로운 가치를 추구해 보고자 생활 활용도가 높은 AR을 구심점으로 활동. Hololens2 AR 디바이스를 이용한 AR 컨텐츠 및 의료 도메인 프로젝트 기획&개발 팀

Hololens2 AR 디바이스를 이용한 AR 컨텐츠 및 의료 도메인 프로젝트 기획&개발

Walklens

WalkLens

아이돌 팬들을 위한 AR 아바타 기반 메타버스 커뮤니티 '덕클링'. 덕클링을 통해 팬들이 우리의 메타버스에서만 가능한 친근한 커뮤니케이션을 할 수 있도록 도움으로써 계속 들어오고 싶은 매력적인 메타버스 서비스 제공

아이돌 팬들을 위한 AR 아바타 기반 메타버스 커뮤니티 '덕클링'

Netural

AGGRO:100은 치부스 세계의 캐릭터가 되어 보드 위를 직접 이동하는 VR 파티 게임이다. 주사위와 이벤트, 아이템으로 순위가 계속 바뀌고, 짧은 미니게임에서 다른 플레이어와 경쟁한다.

평면 보드를 내려다보는 대신 게임판 안에 들어간 시점으로 규칙을 다시 설계했다. 캐릭터와 지역, 아이템의 설정은 이후 LUDENS의 Dessertist Party로 이어졌다.

치부스 대륙에서 펼쳐지는 1인칭 VR 파티 보드게임

AGGRO:100

치부스 대륙을 배경으로 한 VR 파티 보드게임 'Dessertist Party' VR만이 줄 수 있는 가상세계의 몰입감을 활용하여 기존의 파티 보드게임보다 더욱 실감 나는 1인칭 파티 보드게임을 제작합니다.

치부스 대륙을 배경으로 한 VR 파티 보드게임 'Dessertist Party'

LUDENS

VR만의 특성으로 귀여운 곰돌이를 꾸미는 게임. 처음 VR환경을 경험하는 초심자를 대상으로, VR 특성을 살린 도구를 사용하여 귀여운 곰돌이를 꾸미는 게임 처음 VR환경을 경험하는 초심자를 대상으로, VR 특성을 살린 도구를 여기까지 최대

Github

Store

VR만의 특성으로 귀여운 곰돌이를 꾸미는 게임

Jellysis

공간 컴퓨팅 관련 기술 연구 및 시장 분석

Spatial Computing Lab

패쓰스루 기능을 활용해 MR과 VR을 넘나드는 미스터리 퍼즐 디펜스 게임

BareHands

VOID BOX는 하루의 흐름에 따라 플레이 방식이 달라지는 서사형 게임이다. 낮에는 VR 공간에서 단서를 모아 퍼즐을 풀고, 밤에는 패스스루 MR로 바뀐 현실 공간에서 적의 공격을 막는다.

현실의 방이 전투 공간으로 이어지는 전환을 통해 VR과 MR을 별개의 모드가 아닌 하나의 이야기로 묶었다. BareHands에서 연구한 손 상호작용과 패스스루 경험을 계승했다.

낮과 밤에 VR·MR을 오가는 미스터리 퍼즐 디펜스 게임

VOID BOX

See The Beyond는 익숙한 감각과 사회적 주제를 새로운 시청각 경험으로 바꾸는 미디어아트 프로젝트다. 맛과 색이 만나는 공감각을 다룬 See the Taste, 보이지 않는 개인정보 문제를 드러낸 See the Privacy를 제작했다.

7기에는 감각과 인간의 관계를 See the Human으로 넓혔다. 기술을 기능으로 설명하기보다 관람자가 보고 느끼는 작품의 언어로 사용했으며, Ars Electronica 출품을 염두에 둔 작업으로 발전시켰다.

감각과 프라이버시를 기술·예술의 언어로 다룬 미디어아트 프로젝트

See The Beyond

Perrito가 만드는 《Ready, Puppy, Go!》는 무지개다리를 건넌 강아지와 도그랜드에서 다시 만나는 VR 퍼즐 어드벤처다. 플레이어는 강아지 메론이와 함께 여러 공간을 여행하며 단서를 모으고, 맵 곳곳에 숨은 별을 찾아 다음 이야기로 나아간다.

메론이는 길을 알려 주는 장치에 머물지 않는다. 쓰다듬고 함께 놀며 교감하는 여러 상호작용을 통해 플레이어와 유대감을 쌓고, 퍼즐을 푸는 시간과 쉬어 가는 순간 모두를 함께한다. 반려동물과 다시 만난다는 이야기와 VR의 거리감·손동작이 맞물려 따뜻하고 다채로운 모험을 만든다.

도그랜드의 각 맵은 서로 다른 분위기와 퍼즐을 가진다. 현재 제작 중인 세 번째 맵 ‘으스스 밤의 공원’에서는 밤의 공원이라는 낯선 공간을 탐색하며 새로운 단서와 별을 찾는다. 액션과 슈팅 중심의 VR 시장에서 누구나 편안하게 즐길 수 있는 캐주얼·힐링 게임을 보여 주는 프로젝트다.

무지개다리 너머에서 반려견과 다시 만나는 VR 퍼즐 어드벤처

Perrito

실감기술(XR)과 인공지능(AI)의 융합을 통해서 면접(이직/채용) 시장의 문제를 해결하자!

비전메타몽

별자리의 이야기를 담은 플라네타리움 게임. 판타리움

판타리움

모멘텀 프로젝트

Celestoria는 공간 비디오를 여러 장 모아 하나의 앨범으로 만들고 다른 사람과 공유하는 Vision Pro 앱이다. 사진첩처럼 영상을 나열하지 않고, 촬영된 순간의 깊이와 배치를 살린 공간 안에서 추억을 다시 본다.

앨범 제작과 감상, 공유를 Vision Pro의 시선과 손 인터페이스에 맞게 설계했다. 실제 사용자를 받는 서비스로 운영했으며 iOS 앱과 App Store 출시까지 범위를 넓혔다.

Spatial Video 앨범을 만들고 공유하는 Apple Vision Pro 소셜 앱

Celestoria

자연어 처리, 컴퓨터 비전, 음성 인식처럼 서로 다른 AI 기술을 XR 환경에 결합했다. 화면 안에서 끝나는 인식 결과를 공간과 몸을 사용하는 상호작용으로 바꾸는 방법을 탐색했다.

AI가 XR 콘텐츠 안에서 맡을 수 있는 역할을 나누고, 각 기술과 어울리는 인터랙션을 짧은 프로토타입으로 검토했다. 개발자가 새로운 조작 방식을 설계할 때 활용할 수 있는 가능성에 집중했다.

AI의 인식 능력을 XR 상호작용으로 바꾸는 프로토타입 연구

Ctrl + Alt + Bind

DTxR

FireSightAR는 짙은 연기로 앞이 보이지 않는 화재 현장에서 소방관의 이동을 돕는다. AR 글래스 화면에 공간 구조와 위험 요소, 동료의 위치와 탈출 방향을 겹쳐 보여 준다.

RGB-D, 열화상, mmWave 레이더와 AHRS를 함께 사용해 시야가 막힌 환경에서도 주변을 파악한다. 현장의 AR 핑과 상황실 대시보드를 연결해 소방관과 지휘관이 같은 정보를 보도록 설계했다.

연기 속 소방관에게 공간과 위험 정보를 보여 주는 AR 시스템

FireSightAR

해치는 FireSightAR를 실제 소방 장비에 가까운 스마트 헬멧 형태로 발전시킨 프로젝트다. 소방관은 고개를 돌리는 것만으로 공간 구조, 팀원의 위치, 출구까지의 경로를 HUD에서 확인한다.

mmWave 레이더와 열화상 카메라, 여러 센서의 정보를 합쳐 연기 너머의 장애물과 사람을 감지한다. 실내 SLAM으로 현재 위치를 추정하고, 현장 정보는 지휘관의 관제 화면과 실시간으로 공유된다.

농연 속 탈출 경로를 안내하는 소방관용 AR 스마트 헬멧

해치

미래의 VR·AR 기기에서 사용할 수 있는 입력 방식과 상호작용을 작은 게임으로 구현했다. 기능만 보여 주는 데모보다 명확한 규칙과 목표가 있는 게임을 통해 사용자가 인터페이스를 자연스럽게 익히도록 했다.

빠른 프로토타입과 반복 테스트로 조작의 피로도, 학습 속도, 몰입의 변화를 비교했다. 인터페이스 자체와 콘텐츠 안에서 사용할 때의 경험을 함께 평가했다.

새로운 XR 인터페이스를 게임으로 만들고 검증한 연구 프로젝트

Future Game Lab

Immersyn은 브랜드의 색과 이야기, 분위기를 공간 속 감각 경험으로 바꾼다. 차를 마시는 흐름을 담은 90도씨 XR 티룸, 인상주의 회화를 직접 거니는 감각공작소, 와인을 다감각으로 풀어낸 VinoSense를 제작했다.

시각 정보만 보여 주지 않고 소리, 손의 움직임, 공간의 온도와 질감을 연상시키는 연출을 함께 사용한다. VR과 MR 사이를 자연스럽게 오가는 Seamless MR도 이 경험을 뒷받침한다.

브랜드와 이야기를 여러 감각으로 경험하는 XR 공간 프로젝트

Immersyn

Project SMG는 SF 아포칼립스 세계를 탐사하며 자원을 모으고 적과 싸우는 VR 게임이다. 창과 검 같은 냉병기, 총기, 마법을 양손에 자유롭게 조합해 상황마다 다른 전투 방식을 만든다.

6DoF 조작을 살려 무기를 던지거나 막고, 주변 사물을 전투에 이용할 수 있다. 짧고 밀도 높은 교전과 협동 플레이를 통해 긴장감과 전우애가 함께 생기는 흐름을 설계했다.

냉병기와 총기, 마법을 자유롭게 조합하는 VR 전투 게임

Project SMG

실패지향은 매끄럽고 편리한 상호작용만 좇지 않는다. 사용자를 일부러 화나게 하는 조작, 조이스틱 없이 움직이는 방법, 몸이 쉽게 지치는 인터랙션처럼 보통은 버려질 아이디어를 직접 만들어 본다.

왜 불편한지 몸으로 확인하고, 그 실패가 전혀 다른 재미나 표현으로 바뀌는 순간을 찾는다. 망한 인터랙션을 함께 시연하고 이야기하는 자리도 열어 시행착오 자체를 팀의 연구 재료로 삼았다.

실패한 인터랙션에서 새로운 XR 가능성을 찾는 연구 프로젝트

실패지향

Folding Birding은 관람객이 직접 접고 꾸민 종이 새를 MR 공간에서 움직이는 디지털 생명체로 이어 주는 참여형 미디어아트다. 종이를 접는 손의 경험이 헤드셋 안의 장면과 연결된다.

눈앞의 실제 공간과 가상의 새가 한 장면에 겹쳐지고, 시각과 소리, 손의 감각과 몸의 움직임이 함께 사용된다. 완성된 데모는 전시와 논문, 어워드 출품이 가능한 작품 형태로 발전했다.

직접 접은 종이 새가 MR 공간에서 살아 움직이는 참여형 미디어아트

Folding Birding

THE FEELIES는 같은 장면을 서로 다른 인물의 위치와 관점에서 감상하는 VR 콘텐츠 플랫폼이다. 셜록 IP를 바탕으로 관찰자, 사건의 당사자, 주변 인물의 시점을 옮겨 다니며 하나의 사건을 여러 각도에서 이해한다.

시점마다 보이는 정보와 들리는 대사가 달라 반복 감상이 곧 추리 과정이 된다. 사용자가 원하는 순간에 관점을 바꾸면서도 이야기의 흐름을 놓치지 않도록 장면과 인터페이스를 구성했다.

이야기 속 여러 인물의 시점을 오가는 멀티시점 VR 플랫폼

THE FEELIES

Two of Us는 두 플레이어에게 서로 다른 정보와 능력을 주는 비대칭 협동 게임이다. 혼자서는 풀 수 없는 상황에서 상대에게 설명하고 도움을 요청하는 방식이 자연스럽게 드러난다.

과거와 현재, 미래의 나를 잇는 스테이지를 함께 통과하면 선택과 대화가 성향 분석 리포트로 정리된다. 퍼즐의 정답보다 두 사람이 관계를 맺고 문제를 푸는 방식 자체를 경험의 중심에 두며, 2026 IEEE VR XR Gallery 전시작으로 선정됐다.

서로 다른 역할로 관계와 자신을 돌아보는 2인 협동 VR 게임

Two of Us

Virtual Dojo는 AI 에이전트를 정답을 알려 주는 도구가 아니라 함께 대화하고 부딪히는 캐릭터로 만든다. 사용자는 XR 공간에서 여러 에이전트를 만나 질문하고, 서로 다른 관점을 비교하며 주제를 이해한다.

SophyBARA에서는 고전 철학자들의 말투와 사상을 각 AI의 페르소나로 구성했다. LLM과 RAG로 철학 자료를 연결하고, 여러 에이전트가 토론하는 과정에서도 각자의 성격과 주장이 유지되도록 설계했다.

개성 있는 AI 캐릭터와 대화하며 배우는 몰입형 교육 프로젝트

Virtual Dojo

Funnikulus는 반복되는 악몽을 새로운 결말로 바꾸는 심상 리허설 치료를 VR로 보조한다. 사용자가 기억하는 장소와 상황을 통제 가능한 가상 환경으로 옮겨, 두려운 장면을 안전한 조건에서 다시 경험하게 한다.

악몽의 강도와 장면을 단계적으로 조절하고 치료 흐름을 방해하지 않는 인터페이스를 설계했다. 연구와 프로토타입은 10기 Spoof!로 이어졌다.

악몽을 안전하게 다시 마주하도록 돕는 VR 치료 보조 프로젝트

Funnikulus

Spoof!는 사용자가 반복해서 꾸는 악몽을 VR 공간으로 옮기고, 스스로 장면과 결말을 바꿔 보게 한다. 현실에서는 피하고 싶은 기억을 언제든 멈출 수 있는 환경에서 천천히 마주하도록 돕는다.

AI가 사용자의 설명을 바탕으로 장소와 사건을 구성하고, 치료 단계에 맞춰 자극의 강도를 조절한다. 몰입은 공포를 키우는 장치가 아니라 사용자가 악몽에 대한 통제감을 되찾는 수단으로 쓰인다.

악몽의 장면과 결말을 다시 구성하는 몰입형 VR 서비스

Spoof!

Ghost

MemoAnchor는 벽이나 바닥에 적은 메모가 사라지거나 사진만으로 위치를 찾기 어려운 문제를 해결한다. 현장을 스캔한 3D 공간에 하자 내용과 사진, 담당 작업을 고정해 두면 다시 방문했을 때 같은 자리에서 바로 확인할 수 있다.

각 기록은 공간 좌표를 가진 데이터로 저장되고 수정 상태와 담당자 정보가 함께 연결된다. 현장 작업자는 AR 화면에서 필요한 정보를 찾고, 관리자는 전체 하자를 목록과 공간 양쪽에서 확인한다.

건설 현장의 하자 정보를 실제 위치에 고정하는 AR 기록 서비스

MemoAnchor

MIRRORDY는 하루의 회고를 빈 문서에 적는 대신 캐릭터와 나누는 대화로 바꾼다. 사용자가 경험과 감정을 말하면 에이전트가 질문을 이어 가고, 대화에서 중요한 사건과 생각을 정리한다.

회고에서 나온 목표와 키워드는 XR 공간에 등장하는 캐릭터의 모습과 행동에 반영된다. STT로 말을 듣고 LLM으로 대화를 구성하며 TTS로 응답해, 지난 기록이 다음 회고에서도 이어지는 관계를 만든다.

대화와 XR 캐릭터로 이어가는 몰입형 회고 시스템

MIRRORDY

NodeXR는 여러 사람이 XR 공간에서 함께 일할 때 발화를 협업의 중심 입력으로 사용하는 프로젝트다. 말의 내용과 공간 안의 작업 맥락을 연결해 의사소통이 끊기지 않는 협업 방식을 연구한다.

AR과 VR처럼 서로 다른 환경에서도 같은 대상을 이야기하고 작업 흐름을 공유할 수 있도록 시나리오와 상호작용 구조를 설계했다.

말을 중심으로 XR 협업을 연결하는 커뮤니케이션 프로젝트

NodeXR

Unseen은 공간 자체가 퍼즐의 규칙이 되는 VR 어드벤처 게임이다. 플레이어는 방과 통로를 뒤집고 회전시키며, 같은 장소를 다른 각도에서 바라볼 때만 드러나는 길과 규칙을 발견한다.

Viewfinder의 시점 전환, Backrooms의 비현실적인 공간감, Shadowmatic의 착시를 VR 인터랙션으로 다시 구성했다. 퍼즐의 해답은 인벤토리보다 관찰과 움직임에서 나오고, 공간이 변할 때마다 이야기의 시점도 함께 달라진다.

낯선 장면을 이해하는 순간의 시각적 재미와 직접 조작하는 기술적 재미를 한 경험으로 묶는다. 완성된 게임은 Steam과 Meta Store 출시를 향해 제작된다.

공간을 뒤집고 회전시키며 새로운 규칙을 발견하는 VR 퍼즐 어드벤처

Unseen

Whoopsie는 잊고 싶은 흑역사를 한 편의 디지털 장례식으로 바꾸는 XR 게임이다. 사용자는 좁은 관 속에서 냉소적인 AI 해골에게 자신의 실수와 그때 느낀 감정을 털어놓는다. 해골은 시니컬한 농담을 섞어 사건, 생각과 감정, 몸의 반응을 차례로 묻고, 머릿속에서 반복되던 기억을 입 밖으로 꺼내게 한다.

대화가 끝나면 관 뚜껑을 주먹으로 깨고 밖으로 탈출한다. 강한 햅틱과 타격 효과가 이불킥의 에너지를 실제 움직임으로 바꾸고, 사용자가 망치로 관에 못을 박으면서 감정의 매듭을 짓는다. 진지한 상담실 대신 B급 장례식과 물리적인 손맛으로 통쾌한 카타르시스를 만든다.

AI는 대화에서 핵심 감정을 찾아 각 감정과 어울리는 꽃과 꽃말을 제안한다. 사용자는 세 송이를 직접 골라 꽃다발로 묶고 해골에게 헌화한다. 마지막에는 흑역사를 위트 있게 요약한 묘비명이 비석에 새겨지며, 부끄러웠던 과거를 없애기보다 한때의 자신으로 받아들이고 묻어 보내는 의식이 완성된다.

부끄러운 과거를 유쾌한 장례식으로 떠나보내는 XR 감정 해소 게임

Whoopsie!

MIX는 Mobility Interior eXperience의 약자로, 차량을 사양표가 아니라 실제 생활 장면 속에서 비교하는 XR 쇼룸이다. 사용자는 차량 내부에 직접 들어가 캠핑이나 아웃도어처럼 자신에게 필요한 상황을 체험하고, 공간과 옵션이 생활에 어떻게 맞는지 확인한다.

현재 MVP는 하나의 차량과 캠핑 시나리오를 중심으로 구성되어 있다. 다음 단계에서는 차종과 옵션을 넓히고, 사용자의 답변과 선택을 AI가 분석해 업무형, 반려동물 동반형처럼 서로 다른 생활 유형을 찾는다.

진단 결과에 따라 체험할 시나리오와 미션, 어울리는 차종과 옵션이 달라진다. 전시장에 있는 차량을 둘러보는 데서 끝나지 않고, 구매 뒤의 생활을 먼저 경험해 보는 서비스다.

라이프스타일에 맞는 차량과 옵션을 XR로 체험하는 모빌리티 쇼룸

Dustiny는 정리를 자꾸 미루는 13~16세 청소년을 위한 XR 클린업 게임이다. 헤드셋의 패스스루 화면으로 실제 책상을 비추면, 기억을 잃은 먼지 캐릭터 더리가 나타나 치워야 할 물건과 미션을 알려 준다.

AI 비전이 책상 위 쓰레기와 정리 대상을 인식하고, 결과를 XR 오버레이와 캐릭터 반응으로 연결한다. 사용자가 실제로 물건을 치울수록 더리는 보송한 모습을 되찾고, 청소 코인을 받아 꾸미기 아이템을 모을 수 있다.

해야만 하는 집안일을 짧은 미션과 캐릭터 성장으로 바꿔 자발적인 정리 습관을 만든다. XR 공간 인식, AI 객체 인식과 반복 가능한 보상 루프가 현실 행동 하나로 이어지는 게임이다.

현실의 책상 정리를 게임으로 바꾸는 생활습관 개선형 XR·AI 클린업 게임

Dustiny

Re:Hear XR은 가상 청중 앞에서 발표하고 가상 면접관과 질의응답을 반복하는 훈련 서비스다. 청중은 발표 내용과 흐름에 맞춰 표정, 시선, 자세와 말로 반응하고, 사용자는 실제 평가 상황과 비슷한 긴장 속에서 대응 방법을 익힌다.

XR 발표 환경, 청중 애니메이션, 세션을 설정하는 웹 화면을 하나의 흐름으로 연결한다. STT·LLM·TTS 기반 AI가 발표 중 백채널과 질문을 만들며, 면접형에서는 답변에 따라 추가 질문도 이어 간다.

반응하는 청중과 반응하지 않는 청중을 비교해 사회적 실재감과 발표 경험의 차이를 살핀다. 발표형과 면접형을 함께 다듬어 안전하게 반복할 수 있는 훈련 환경으로 확장한다.

청중의 반응과 질문에 대응하며 연습하는 AI 기반 XR 발표·면접 훈련

Re:Hear

><Move_on>은 EMDR의 양측성 자극을 XR로 구현해 정서적 안정과 경미한 트라우마 치료를 보조한다. 사용자는 몰입형 공간에서 좌우로 반복되는 시각·청각·촉각 자극을 따라가며, 세션의 속도와 강도를 안전하게 조절한다.

Unity 기반 세션 플로우와 인터랙션, 편안한 3D 환경, 사용자의 상태를 고려한 UI를 함께 만든다. 임상심리 교수와 연구진이 참여해 사용성 테스트와 초기 임상연구를 준비하고, 치료 원리가 콘텐츠의 재미나 연출에 묻히지 않도록 구조를 검토한다.

프로토타입과 연구 결과는 HCI KOREA 2027 출품과 후속 연구의 기반이 된다. 완성된 콘텐츠만 보여 주는 프로젝트가 아니라, 효과와 안전성을 함께 확인하는 연구형 XR 도구다.

EMDR의 양측성 자극을 XR 환경에 맞게 설계한 심리치료 보조 프로젝트

><Move_on>

SOOM: The Silent Journey는 사용자의 호흡 주기와 세기를 게임 속 날씨로 바꾸는 VR 사막 탐험 게임이다. 호흡이 흐트러지면 동심원 모양의 모래바람이 시야를 가리고, 천천히 리듬을 되찾으면 풍경이 다시 선명해진다.

플레이어 캐릭터 Shu는 지구에 불시착한 외계인이다. 헤어진 동료와 집으로 돌아가기 위해 사막길을 건너고 새로운 친구를 만나며 오아시스를 찾아간다. 우주선과 사막길이 데모의 중심 구간이고, 유적지와 오아시스는 다음 여정을 보여 주는 공간으로 이어진다.

복부에 올려놓은 VR 컨트롤러로 호흡 움직임을 감지하고 Unity의 시각 효과와 연결한다. 좁은 주거 공간에서 수면과 집중 문제를 겪는 청년이 자연 풍경 속에서 스스로 호흡을 조절하도록 돕는 바이오피드백 게임이다.

호흡으로 모래바람을 걷어 내며 안정을 찾는 VR 사막 탐험 게임