KAIST

< 전산학부 김대화 석사과정 >

우리 대학 전산학부 이기혁 교수 연구팀이 가상환경에서 안테나의 반사 손실을 이용해 사용자의 핀치 제스처를 정밀하게 감지하는 방법에 대해 연구했다고 밝혔다. (논문명: ‘AtaTouch: Robust Finger Pinch Detection for a VR Controller Using RF Return Loss’’)

이 교수 연구팀 소속 김대화 석사과정 학생이 제1저자로 참여한 이번 연구는 국제학회 ACM CHI 2021 (ACM CHI Conference on Human Factors in Computing Systems)에 게재되고 Honorable Mention Award를 수상했다. ACM CHI 학회는 Human-Computer Interaction 분야의 최고 권위 학회로, Honorable Mention Award는 전체 논문 중 상위 5％의 논문에 주어지는 상이다. 

가상환경에서 컨트롤러는 정확한 손 위치 추정과 햅틱 피드백을 통한 몰입형 가상현실을 가능하게 하고, 버튼 및 조이스틱과 같은 추가 입력을 제공하기 때문에 많은 장점이 있다. 컨트롤러의 장점을 유지하면서 자연스러운 상호작용을 지원하기 위해, 최신 감지 기술들은 컨트롤러를 든 상태에서 사용자의 손가락을 트래킹하고 손 제스처를 감지한다. 손 제스처들 중 핀치 제스처(엄지손가락과 다른 손가락이 서로 맞닿아 꼬집는 듯한 손동작)는 조그마한 움직임에도 큰 햅틱 변화를 내기 때문에 가상환경에서 버튼을 누르거나, 컨트롤 막대를 조절하고, 작은 가상 물체를 정교하게 움직이게 하며, 텍스트 입력을 하는 등의 많은 상황에서 유용하게 이용된다. 

하지만 기존의 감지 기술들은 두 손가락의 터치 유무를 정밀하게 구분하는데 어려움이 있다. 빈번한 터치 구분 오류는 사용자들이 실패를 보상하기 위해 손가락을 평소보다 멀리 떨어뜨리거나 두 손가락을 세게 치도록 만들고, 그에따라 사용자는 상호작용 중 피로감을 느끼게 된다. 

< 그림 1. 손과 안테나의 등가회로 >

이번 논문은 전자기적으로 결합된 손과 안테나의 임피던스 변화를 이용하기 때문에, 기존의 핀치 제스처 감지 방식의 한계를 극복하고 정밀한 손가락의 터치 감지를 가능하게 한다. 두 손가락의 터치를 구분하는 원리는 다음과 같다. 사용자의 손을 안테나에 가까이 가져가면, 각각의 인덕터 성분으로 인해 안테나와 손가락의 임피던스가 결합된다. 두 손가락이 맞닿은지 혹은 떨어졌는지 여부에 따라 손가락의 전기용량 성분이 달라지고, 그에 따라 안테나의 반사 손실이 달라진다(그림1). 안테나에서 전파가 전송될 때 매질의 임피던스의 차이로 인해 일부는 반사되고 일부는 전송되는데, 손가락의 터치 여부에 따른 임피던스 변화에 의해 반사되는 전파의 양이 달라지기 때문에 반사손실의 변화를 측정할 수 있는 것이다. 

< 그림 2. 프로토타입 컨트롤러 >

< 그림 3. 가상환경에서 가상블록을 옮기는 예시 >

연구팀은 프로토타입 컨트롤러를 개발(그림2)하여 그의 성능을 평가했다. 12명의 피실험자를 대상으로 한 실험에서 96.4%의 터치 구분 정확도를 확인했다. 또한, 가상블록을 옮기는 실제 가상환경 시나리오에서 낮은 오류율을 보였고, 실험참가자들은 민감하고 가벼운 상호작용이 가능했다고 응답했다. 

이번 연구는 과학기술정보통신부와 정보통신기획평가원의 지원을 받아 수행됐다. (No.2020-0-00537, Development of 5G based low latency device – edge cloud interaction technology).

-       논문 관련 정보: https://daehwa.github.io/atatouch