%ed%99%95%ec%9e%a5%ed%98%84%ec%8b%a4
-
웹툰 '보는 시대' 끝...'경험하는 시대' 연다
스마트폰 화면 속 웹툰이 현실 공간으로 뛰쳐나온다. ‘보는 웹툰'에서‘경험하는 웹툰'의 시대가 열린다. 우리 대학 연구진이 다양한 독자들이 현실 공간에서 웹툰을 입체적으로 즐길 수 있는 차세대 확장현실(XR, eXtended Reality, 가상현실·증강현실·혼합현실을 아우르는 기술) 만화 플랫폼을 세계 최초로 개발했다. 웹툰의 무대를 화면에서 현실로 넓히며 미래 만화의 새로운 가능성을 제시했다.
우리 대학은 전기및전자공학부 이안 오클리(Ian Oakley) 교수 연구팀이 인간-컴퓨터 상호작용(HCI, Human-Computer Interaction, 사람이 컴퓨터와 보다 쉽고 자연스럽게 상호작용하는 방법을 연구하는 분야) 전문가와 실제 웹툰 창작자, 독자 등 15명이 참여한 체계적인 사용자 연구를 통해, 차세대 확장현실(XR) 만화가 갖춰야 할 핵심 디자인 원칙과 발전 방향을 제시했다고 21일 밝혔다.
연구팀은 XR 환경에서 만화를 읽고 직접 제작할 수 있는 새로운 플랫폼‘코믹스XR(ComiXR)'을 개발하고, 참가자들이 기존 인쇄 만화를 XR 환경으로 직접 변환해 제작하고 체험하도록 했다.
종이 만화책에서 출발한 만화는 스마트폰의 등장과 함께 세로 스크롤 방식의 웹툰으로 진화하며 폭발적으로 성장해 왔다. 연구팀은 웹툰의 다음 진화 단계로 XR 기기에 주목했다. 화면에서는 구현하기 어려운 공간감과 입체 음향, 시선 추적(Eye Tracking, 사용자의 눈동자 움직임을 인식하는 기술) 등을 만화에 접목하기 위해 메타 퀘스트 프로(Meta Quest Pro) 기반의 ComiXR 플랫폼을 구축했다.
실험 참가자들은 기기를 착용한 채 실제 방 안에 3차원(3D) 캐릭터와 말풍선, 의성어 등을 자유롭게 배치하며 자신에게 가장 편안하고 몰입감 높은 만화 공간을 직접 구성했다.
실험 결과, 독자들은 단순히 평면 만화 페이지를 가상 공간에 띄우는 방식보다 현실 공간의 깊이감을 적극 활용하는 연출을 훨씬 선호했다. 배경 뒤에 캐릭터를 배치하고 말풍선을 별도의 층으로 분리했을 때 몰입감이 크게 향상됐다. 특히 독자의 시선을 추적해 특정 캐릭터를 바라볼 때만 다음 대사가 나타나도록 하는 기능은 결말을 미리 보게 되는‘스포일러'를 효과적으로 방지하는 것으로 나타났다.
또한 독자의 표정 변화에 따라 특수효과가 나타나고, 햅틱(Haptic, 진동 등 촉각을 통해 정보를 전달하는 기술) 기능으로 등장인물의 심장 박동까지 전달하는 등 기존 만화에서는 경험할 수 없었던 새로운 감각적 경험도 구현했다.
연구팀은 이번 연구를 통해 XR 만화를 위한 네 가지 핵심 디자인 개념도 제안했다. 첫째, 방 안 벽을 갤러리처럼 활용하는‘패널 갤러리(Panel Gallery)', 둘째, 책상이나 벽 위에 만화를 팝업북처럼 띄우는‘팝업(Pop-up)', 셋째, 야외 공간에 3D 캐릭터와 만화 요소를 배치하는‘어라운드 코믹(Around Comic)', 넷째, 저시력자를 포함한 다양한 독자의 접근성을 높이는‘인클루시브 코믹스(Inclusive ComiX, 모두를 위한 포용형 XR 만화)'다.
연구팀은 XR 만화가 기존 스마트폰 웹툰을 대체하기보다 작품의 세계관을 더욱 생생하게 체험하는 특별 전시와 교육 콘텐츠, 그리고 시각장애인과 저시력자 등 다양한 이용자의 문화 접근성을 높이는 새로운 플랫폼으로 활용될 것으로 전망했다.
이안 오클리 교수는 "이번 연구는 단순히 만화를 입체적으로 구현한 것이 아니라, 독자의 공간과 시선, 움직임까지 고려해 미래의 만화를 어떻게 설계해야 하는지를 제시한 연구”라며 "앞으로 XR 기술은 누구나 만화를 더욱 몰입감 있게 경험할 수 있는 새로운 콘텐츠 환경을 만드는 데 중요한 역할을 할 것”이라고 말했다.
이번 연구는 KAIST 정보전자연구소 아마르 알타이(Ammar Al-Taie) 박사후연구원이 제1저자로, 전기및전자공학부 한현영 박사과정생이 공동 저자로 참여했다. 연구 결과는 인간-컴퓨터 상호작용 및 디자인 분야 최고 권위 국제학술대회인 에이씨엠 디아이에스 2026(ACM DIS, Designing Interactive Systems Conference 2026)에서 발표됐으며, ComiXR 플랫폼은 오픈소스로 공개돼 누구나 활용할 수 있다.
※ 논문명: ComiXR: Exploring Comic Layouts in eXtended Reality, DOI: https://doi.org/10.1145/3800645.3812857, 오픈소스: https://github.com/ammarjamal/ComiXR
※ 관련 동영상: https://drive.google.com/drive/folders/1D9Efp3T0biDbUm1K5Gu6HLSSy89Uaq8R?usp=sharing
한편 이번 연구는 KAIST 장영실 펠로우십 프로그램과 과학기술정보통신부 및 정보통신기획평가원(IITP)의 ITRC(Information Technology Research Center, 대학 ICT 연구센터) 지원사업의 지원을 받아 수행됐다.
2026.07.21 조회수 1094 -
'멀리 있어도 함께 있는 것처럼' 감성 소통 XR기술로 들어가다
KAIST·국제 연구진이 원격지의 사람들을 마치 한 공간에 있는 것처럼 연결하고, 표정과 감각까지 공유할 수 있는 차세대 가상 소통 기술의 가능성을 제시했다.
KAIST(총장 이광형)는 메타버스대학원 우운택 교수 연구팀은 KI AR연구센터, 캐나다 캘거리대(University of Calgary) 김강수 교수팀, 미국 서던캘리포니아대(University of Southern California) 조나단 그래츠(Jonathan Gratch) 교수팀과 공동 연구를 진행하며, 현실과 가상의 경계를 허물고 사람 간의 소통 방식을 감성적으로 확장하는 확장현실(XR) 기술 연구 성과를 잇따라 발표했다고 7일 밝혔다.
연구팀은 ‘시공간을 넘어 서로의 경험을 확장하고 공유하는’ 현실–가상 융합의 미래를 구체적으로 보여주었다.
예를 들어, 제안하는 기술들이 기반이 되어 XR 기기 및 컴퓨팅 기술이 더욱 발전한다면, 대전에 있는 사용자가 뉴욕 메트로폴리탄 미술관을 실제처럼 정합하고 실제 사람을 닮은 아바타를 통해 표정 변화를 전달하며 현지 관람객과 전시를 함께 즐기는 미래를 상상해볼 수 있다. 나아가 햅틱 장갑과 시각·청각 피드백 기술이 결합되면, 실제로는 만질 수 없는 가상 유물의 질감을 보다 실감있게 체험할 수 있을 것이다.
XR 안경을 착용하지 않은 사람들조차 대형 디스플레이를 통해 3차원 전시 공간을 함께 체험할 수 있게 함으로써, 단순한 정보 전달을 넘어 감각과 공간이 연결되는 새로운 형태의 원격 협업 및 소통 환경을 여는 기반 기술이 될 것으로 기대된다.
감성 기반 XR 기술의 네 가지 혁신적 성과는 다음과 같다.
첫째, ‘다중 원격 공간 정합 기술’은 멀리 떨어진 다수의 공간을 하나의 협업 공간으로 정합하는 알고리즘을 개발해, 공간 수가 많아져도 안정적으로 공동 작업이 가능한 환경을 구현했다.
※ 연구책임자: 김두영 박사 (KAIST AR연구센터), 발표 학회: IEEE ISMAR 2024 (2024.10.23.) ※ 논문명: Spatial Affordance-aware Interactable Subspace Allocation for Mixed Reality Telepresence, (DOI: 10.1109/ISMAR62088.2024.00142)
둘째, 사람-아바타 변형 시의 ‘맥락 인지형 표현 시스템’은 실제 사람을 아바타로 변형하는 과정에서의 상황과 맥락에 따라 표정과 정체성을 자연스럽게 조정할 수 있는 시스템 설계 방향을 제안했다.
※ 연구책임자: 강서영 박사과정 (KAIST), 발표 학회: IEEE VR 2025 (2025.3.12.) ※ 논문명: How Collaboration Context and Personality Traits Shape the Social Norms of Human-to-Avatar Identity Representation, (DOI: 10.1109/TVCG.2025.3549904)
셋째, 시각–촉각 융합 피드백을 통해 가상객체의 감정적 촉감 경험을 구현한 연구는 손의 시각 피드백과 촉각 자극을 결합해 표면 질감과 감정적 반응을 재현함으로써, 단순한 진동 자극을 넘어 감정이 느껴지는 ‘촉각 몰입감’을 구현했다.
※ 연구책임자: 백민주 박사과정 (KAIST), 공동연구자: 윤상호 교수팀, 발표 학회: IEEE ISMAR 2025 (2025.10.11.), 논문명: Visuo-Tactile Feedback with Hand Outline Styles for Modulating Affective Roughness Perception, (DOI: 10.1109/TVCG.2025.3616805)
넷째, 대형 화면 기반 3D 공간 경험 기술은 별도 장비 없이 대형 디스플레이에서 깊이감을 느낄 수 있는 기술을 개발, 박물관·전시관 등 공공 공간에서 여러 관람객이 특수 안경 없이도 3D를 함께 경험할 수 있는 기반 기술을 제안했다.
※ 연구책임자: 김두영 박사 (KAIST AR연구센터), 발표 학회: IEEE ISMAR 2025 (2025.10.11.) ※ 논문명: Viewpoint-Tolerant Depth Perception for Shared Extended Space Experience on Wall-Sized Display, (DOI: 10.1109/TVCG.2025.3616758)
우운택 교수는 “이번 연구들은 시공간을 넘어 서로의 경험을 확장하고 공유하는 방법을 제시한 XR 연구”라며, “이는 대전에서도 전 세계의 재미(Jami=fun)를 경험하고, K-문화를 세계로 확산하는 ‘뉴잼(New Jam) 대전 연구’의 핵심 기반이 될 것”이라고 강조했다.
KAIST 연구팀은 네 가지 혁신 XR 연구들을 통해 IEEE ISMAR 2024·2025 및 IEEE VR 2025에서 총 네 편의 최우수 논문상(Best Paper Award)을 수상했다.
(IEEE VR: 국제전기전자공학회 가상현실학회, IEEE ISMAR: 국제전기전자공학회 혼합현실학술대회)
이 상은 매년 상위 1% 논문에만 수여되는 영예로운 성과로, ISMAR 2024에서는 627편 중 6편, VR 2025에서는 785편 중 7편, ISMAR 2025에서는 763편 중 7편만이 선정됐다.
특히 ISMAR 2025 학회는 대전에서 개최되었으며, 우운택 교수와 한양대 박종일 교수가 공동 조직위원장으로 참여했다. 35개국 830명 이상의 연구자가 참여해 역대 최대 규모를 기록, 한국의 가상융합 기술 위상을 한층 높였다.
2025.11.07 조회수 3628 -
차세대 XR 초정밀 위치 인식기술 최초 개발
초정밀 위치 인식기술로 사물인터넷 기기와 로봇의 미세한 움직임을 조종하고, 나아가서는 초실감형 XR 및 초정밀 스마트 팩토리 등 가상 세계에서 현실과 연결을 시키게 하는 인식기술을 세계 최초로 개발해서 화제다.
우리 대학 전기및전자공학부 김성민 교수 연구팀이 무전원 태그를 통해 세계 최초로 160m 장거리에서 7mm(5m 단거리 0.35mm)의 정확도와 1,000개 이상의 위치를 동시 인식하는 초정밀·대규모 사물인터넷(IoT) 위치인식 시스템을 개발했다고 8일 밝혔다.
연구진이 최초 개발한 무선 태그는, 그 신호가 방해 신호와 주파수 영역에서 완전히 분리되어 신호의 질을 100만 배 이상 향상시킨다. 이를 이용하여 초정밀 위치 인식이 가능해지는 원리다. 해당 기술을 접목하면 XR에서 다량의 사물인터넷을 손가락의 미세한 움직임만으로 쉽게 제어할 수 있는 등, 몰입감을 크게 높일 수 있다. 또한 1,000개 이상의 태그를 0.5초 이하에 동시 인식할 수 있어, 수많은 기기를 실시간 조작할 수 있다.
이 기술은 현존하는 실내외 위치인식 기술 중 작동 범위, 정확도 및 규모에서 성능이 월등하여 그 의미가 깊다. 특히, 최신 실내 측위 기술인 차세대무선기술(UWB, Ultra Wide Band)에 비해 300배의 정확도, 10배의 탐지 거리, 100배의 확장성을 갖는다. 즉, 현재에 비해 훨씬 많은 기기를 정밀하게 다룰 수 있음을 의미한다. 또한, 실외 측위에 한정되는 GPS 위치 인식 기술과 달리 다양한 실내외 환경에서 활용될 수 있다.
본 기술의 태그는 스스로 무선 신호를 생성하는 대신, 주변의 신호를 반사하여 통신한다. 마치 거울과 같은 원리로, 신호 생성에 필요한 전력을 아낄 수 있어 초저전력으로 동작한다. 이에 태양전지 등 무전원으로 동작하거나 코인 전지 하나로 40년 이상 구동할 수 있어, 대량 운용에 적합하다.
전기및전자공학부 배강민 박사과정과 문한결 박사과정이 공동 주 저자로 참여한 이번 연구는 모바일 시스템 분야의 최고 권위 국제 학술대회인 `ACM 모비시스(ACM MobiSys)' 2023에 지난 6월 발표됐다. (논문명: Hawkeye: Hectometer-range Subcentimeter Localization for Large-scale mmWave Backscatter)
김성민 교수는 “이번 성과를 통해 스마트팩토리 등 산업체를 넘어, XR(확장현실) 등 민간에서도 포괄적으로 사용가능한 IoT(사물인터넷) 상호적용 기술로, 전방위적인 위치인식 기술의 보급을 가능하게 할 것으로 기대된다”고 말했다.
한편 이번 연구는 삼성미래기술육성사업과 정보통신기획평가원의 지원을 받아 수행됐다.
2023.08.08 조회수 10766