I design
interactive systems.

VR 발표 환경, 몰입형 연극, 치매·정서 지원 XR까지.
저는 사람과 공간, AI와 센서가 실시간으로 반응하는 인터랙티브 시스템을 설계하는
Creative Technical Director입니다.

Systems shaped by action and interaction.

저는 XR과 AI를 기반으로, 사용자의 행위와 선택에 의해 경험이 생성되는 시스템 을 설계하는 Creative Technical Director입니다.

Unity, 센서 및 액추에이터, AI기반 인터랙션 파이프라인, 모션캡처 등 다양한 기술적 구성 요소를 통합하여, 사람·공간·기술의 상호작용이 만들어내는 관계와 경험의 구조를 설계합니다.

VR 발표 환경의 AI 청중, XR 퍼포먼스, 자율적으로 변화하는 인터랙션 환경과 같이, 기술·공간·서사를 하나의 장치로 통합하여 사용자의 행위가 서사를 이끌어가는 경험을 구축합니다.
Education
2024.03 –
PhD Candidate in Design
Seoul National University
— Advisor: Prof. Eui-Chul Jung 2021.02.19
MFA in Scenography
Korea National University of Arts
— Advisor: Prof. Sijoong Yoon 2011.02.18
BFA in Scenography
Korea National University of Arts
Certifications
2021.10.19
Certified Associate Game Developer
Unity Technologies
2021.03.23
문화예술교육사 2급 (디자인)
문화체육관광부
Residencies
2022.08.10 – 2022.09.30
미로 예술인 레지던시
미로 센터
Capabilities

What I build as a Creative Technical Director

XR ・ Spatial Interaction Design
VR 발표 환경, XR 퍼포먼스, 공간 기반 인터랙션을 설계하여 사용자 행동이 전개되는 방식과 그 흐름을 규정하는 시스템을 만듭니다.
AI Interaction Pipeline
사용자의 발화와 행동을 해석하는 AI 입력 구조와, 맥락에 맞는 에이전트의 언어·비언어적 반응을 설계해 대화형 상호작용 시스템을 구성합니다.
Interactive Systems & Installations
놀이적 행위를 이끌어내는 인터랙티브 오브제와 퍼포머티브 설치 작업을 설계합니다.
Motion Capture & Real-Time Control
motion capture·센서 데이터를 Unity와 연동해 퍼포먼스·오디오·비주얼을 실시간으로 제어하는 시스템을 구현합니다.
Therapeutic & Cognitive XR
발표 불안, 치매·인지 저하, 정서 지원을 위한 XR 환경을 설계하고 사용자 상태에 따라 자극·난이도·반응성을 조절하는 인터랙션 시스템을 개발합니다.
Creative Coding Education
디지털 센싱, 실시간 그래픽스, 인터랙티브 미디어 기술을 활용해 학생들이 자신만의 인터랙션 시스템을 설계하고 구현하도록 지도합니다.
Works

Interactive Works Across XR, AI, and Performance

2021
Honeybooth VR
VR Exhibition Platform | Level Design · Programming
VR 박람회 플랫폼을 위한 가상 전시장 프로젝트입니다. 플레이어는 열기구를 타고 섬을 이동하며 전시장을 탐색하고, 참가기업으로서 부스를 배치하거나 관람객으로서 전시를 체험하는 두 역할을 모두 경험할 수 있습니다. 전시장 레벨 컨셉과 섬 지형·동선 구조를 설계하고, 부스 배치 로직을 구현했습니다.
Honeybooth VR gameplay
2021
The Door: Broken Tape
VR Game | Level Design · Environment · 3D Modeling · Lighting
플레이어는 자신의 방에 남겨진 오브젝트를 단서로 카페, 온실, 바닷가 등 서로 다른 공간을 오가며 잊고 있던 기억을 따라갑니다. 각 공간의 소리와 분위기를 통해 과거의 장면을 다시 마주하도록 설계했으며, 공간·소품 디자인과 3D 모델링, 라이팅·최적화를 담당했습니다.
The Door: Broken Tape gameplay
2021
No-normal in Wonderland
Art Game | Game · Level · System Design · Programming
다수의 기준이 ‘정상성’을 규정하는 사회 속에서 개인의 주체성이 어떻게 흔들리는지를 탐구하는 아트게임입니다. 플레이어는 각 레벨의 규칙 속에서 선택을 반복하며, 그 선택이 만들어내는 결과와 ‘반쪽짜리 자유’의 구조를 경험하게 됩니다.
No-normal in Wonderland gameplay
2021
The Perfect Lab: The Nameless Cat
Art Game | Game · Level · System Design · Programming
연속된 실험의 부작용으로 몸이 파랗게 변한 실험용 고양이가, 이상반응으로 발현된 능력으로 자신을 폐기하려는 연구원들을 제압하고 7개의 실험실 구역을 돌파해 연인 고양이에게 돌아가는 아트게임입니다.
Nameless Cat gameplay
Research

XR UX & AI Audience Research

AI Audience & Backchannel
VR 발표 환경에서 AI 청중의 고개 끄덕임, 시선, 멈춤(pause) 등이 발표자의 인지·정서 상태와 신뢰 형성에 미치는 영향을 연구합니다.
Pause as Social Signal
ASR–LLM–TTS 파이프라인에서 발생하는 지연을 숨기지 않고, “생각하는 침묵”으로 해석되도록 디자인하는 인터랙션 모델을 탐구합니다.
Therapeutic & Cognitive XR
발표 불안 완화, 치매·인지 저하 지원 등 정서·인지 케어를 위한 XR 환경을 설계하고, 자극 강도와 난이도 조절 구조를 연구합니다.
Highlight

AI Audience Agent · System View

System Architecture

AI Audience Agent는 다음과 같은 파이프라인으로 동작합니다.

  • ASR — 발표자의 음성을 실시간 스트리밍으로 인식
  • LLM — 발표 내용과 흐름에 맞는 질문·백채널 생성
  • TTS — 생성된 텍스트를 에이전트 음성으로 변환
  • VR Agent Control — 음성과 함께 시선·고개 끄덕임·표정·상체 제스처 제어

기술적 지연을 숨기기보다, 기다리는 동안의 몸짓을 디자인함으로써 시스템의 한계를 하나의 사회적 신호로 전환했습니다.

Pipeline Sketch
User Voice
ASR
Text
LLM
Response
TTS
VR Agent
실제 구현에서는 각 단계가 비동기적으로 연결되며, VR 에이전트의 상태와 연동됩니다.
Teaching

Creative Coding & XR Studio

AR Player Lab
AR · Shader · Arduino
AR 환경에서 셰이더와 아두이노를 연결해, 학생들이 자신의 몸과 디지털 오브젝트의 관계를 실험하는 랩 수업을 운영했습니다.
Art Boundary Collision
Intro to Creative Coding
예술과 코드의 경계를 주제로, p5.js와 Unity를 활용해 개인의 서사를 인터랙티브하게 구현하는 수업을 진행했습니다.
Generative Design Studio
Algorithmic Thinking
규칙·시스템을 설계해 형태와 움직임을 생성하는 제너러티브 디자인 스튜디오를 운영하며, 알고리즘적 사고를 훈련시켰습니다.
Contact

Let’s build the next system together

협업 제안, 프로젝트·리서치 문의, 강의·워크숍 초청 모두 환영합니다.

atelier@borades.art github.com/boracles Seoul, South Korea

© Bora Youn. All rights reserved.