-
동작 인식 증강현실 스마트 안경 개발
〈 유 회 준 교수 〉
우리 대학 전기 및 전자공학과 유회준 교수 연구팀이 동작 인식이 가능한 증강 현실 전용 초저전력 스마트 안경 ‘케이 글래스 3(K-Glass 3)’를 개발했다.
유 교수 연구팀은 2014년 증강현실을 기반으로 한 케이 글래스 1, 2015년 시선추적이 가능한 케이 글래스 2에 이어 동작 인식이 가능한 3번째 버전의 케이 글래스 3를 발표했다.
이번 연구는 지난 달 31부터 5일간 미국 샌프란시스코에서 열린 국제고체회로설계학회(ISSCC)에서 발표됐다.
케이 글래스 3의 핵심 기술은 스테레오 카메라 시스템이다. 이를 통해 사용자가 가상 키보드를 타이핑하거나 가상 피아노 연주를 하는 등의 증강 현실을 체험할 수 있다.
기존 안경형 스마트 기기에서는 텍스트 전송을 위한 UI/UX(사용자 인터페이스 및 경험)가 없어 텍스트에 익숙한 사용자들에게 유용할 것으로 기대된다.
최근 대기업에서 발표되는 증강현실 기기들은 복잡한 알고리즘 처리를 위한 컴퓨터가 추가로 요구되고, 가상 아이콘 클릭 등의 심화 동작을 인식하기 위한 전용 센서를 필요로 한다.
이는 평균 3와트(W) 이상의 많은 전력을 소모시켜 스마트폰 대비 20%에 불과한 스마트 안경 시스템에서 사용하기엔 부적합하다.
그러나 케이 글래스 3의 스테레오 카메라 시스템은 복잡한 스테레오 비전 알고리즘을 초저전력 프로세서 내에서 평균 20mW의 효율로 가속하기 때문에 24시간 이상 동작 가능하다.
이는 연구팀이 저전력 딥러닝 전용 멀티코어를 모바일 기기에서 가속할 수 있도록 개발해 전용 프로세서 내에 집적했기 때문에 가능했다.
딥러닝 멀티코어는 총 7개의 고성능 코어로 구성돼 있고 사용자 동작 인식을 33ms 이내의 빠른 속도로 가속해 편리함을 증가시켰다. 또한 동작을 탐지해 사용하지 않을 때는 작동을 멈춰 초저전력으로 가속할 수 있다.
연구팀은 스마트 안경 시장이 스마트폰을 대체하기 위해선 저전력, 소형화는 물론 편리하고 직관적인 유저 인터페이스 및 경험(UI/UX) 개발이 필수적이라고 말했다.
이에 유 교수는 “케이 글래스 3는 기존 안경형 디스플레이(HMD)가 지원하지 않는 편리하고 직관적인 UI를 결합해 하나의 저전력 시스템으로 구현하는 데 성공했다”며 “미래 스마트 모바일 IT 분야에서 혁신적 변화를 주도할 것이다”고 말했다.
박성욱 박사과정 학생이 주도한 이번 연구는 유저 인터페이스 및 경험 개발 기업인 UX Factory와의 협업을 통해 진행됐다.
□ 그림 설명
그림1. 착용 이미지
그림2. 케이글래스 3 실제사진
그림3. 케이글래스 3를 통해 구현한 가상키보드,가상피아노
2016.02.25
조회수 12510
-
증강현실로 스마트시대의 미래를 열다!
영화 ‘마이너리티 리포트’에서 허공에 화면이 뜨고 손짓으로 컴퓨터를 조작하는 모습은 단지 상상 속 미래였다. 하지만 이런 일들이 곧 실현될 것으로 보인다. 우리 학교 전기및전자공학과 유회준 교수 연구팀은 세계 최초로 증강현실 전용 프로세서가 내장된 고성능·초저전력 머리 장착형 디스플레이(HMD, Head Mount Display) ‘케이 글래스(K-Glass)’를 개발했다. 연구팀의 전용 프로세서 개발로 기존 상용칩을 활용한 구글 글래스 보다 속도는 30배 이상 빨라지면서 동시에 사용시간은 3배 이상 길어지는 등 실제 사용자에게 불편함이 많이 줄어 증강현실시대를 앞당길 것으로 기대된다. 증강현실이란, 현실 세계와 이를 적절히 변형한 가상 미디어 콘텐츠가 결합한 것이다. 예를 들면, 동화책에 그려진 공룡 그림을 쳐다보면 3차원 공룡이 책 위로 솟아올라 보이며 방향을 바꾸면 공룡의 다른 쪽이 보이게 하는 기술이다. 삼성, 마이크로소프트 등에서는 관련 특허를 출원하고 있고, 특히 구글에서는 2012년 5월 증강현실을 위한 프로젝트 글래스(Project Glass)를 개발했다. 하지만 자연스러운 증강현실을 구현하기에는 성능이 만족할만한 수준은 아니었다. 구글의 기술은 바코드와 같은 표식을 인식해 해당 물체에 가상 컨텐츠를 첨가하는 방식의 증강현실을 구현하는 방식이기 때문에 표식을 설치하기 힘든 야외에는 증강현실을 구현할 수 없는 큰 단점이 있다. 게다가 2시간 정도만 사용할 수 있을 정도로 전력 소비량이 많아 휴대폰과 같은 모바일 기기처럼 일상생활에서 항상 착용하지는 못하는 실정이었다.연구팀이 개발한 K-Glass의 ‘증강현실 전용 프로세서’는 인간 뇌의 시각 집중 모델(Visual Attention Model)에 영감을 받아 제작돼 저전력·고성능을 동시에 달성했다. 시각 집중 모델은 보고 있는 화면에서 의미 있고 중요한 부분을 배경과 같이 인식에 무의미한 영역들로부터 분리한다. 이에 따라 불필요한 연산을 제거할 수 있어 복잡한 증강현실 알고리즘의 연산 속도를 획기적으로 증가시킬 수 있다는 장점이 있다. 또 전력소모를 줄이기 위해 ‘뉴런의 신경망’을 모방한 네트워크 구조를 적용했다. 프로세서 내부에서는 데이터가 활발하게 돌아다니는데 데이터 쏠림현상에 의해 전송에 병목이 발생할 수가 있는데 연구팀은 뉴런의 신경망 구조를 활용해 프로세서 내 데이터를 전송 및 네트워크 병목현상을 효과적으로 극복했다. 개발된 증강현실 전용 프로세서는 65nm(나노미터) 공정에서 제작돼 32㎟ 면적에 1.22TOPS(Tera-Operation per Second, 1초당 1012회 연산속도) 성능을 보인다. 또한 30fps(초당프레임)/720p(픽셀) 비디오 환경의 실시간 동작에서 1.57TOPS/W(와트)의 높은 에너지 효율을 나타내 장시간 동작할 수 있다. 유회준 교수는 “스마트 폰의 뒤를 잇는 차세대 모바일 디바이스로써 HMD에 대한 관심이 급증하고 있다”며 “투과형 HMD는 증강현실을 구현함에 따라 교육 엔터테인먼트 등의 분야에 큰 변화를 가져올 것”이라고 말했다. 또 “K-Glass는 구글의 프로젝트 글래스 등 기존 HMD의 낮은 컴퓨팅 성능을 획기적으로 향상시키는 것은 물론 초저전력 소비를 달성하는데 성공, 미래 모바일 IT분야에서 혁신적인 변화를 주도할 것”이라고 연구 의의에 대해 말했다. 유회준 교수 지도하에 김경훈 박사과정 학생이 주도해 개발한 K-Glass는 이달 미국 샌프란시스코에서 개최된 세계적 반도체 학술대회 ISSCC(국제고체회로설계학회)에서 발표돼 커다란 주목을 받았다. K-Glass 데모 동영상 유튜브 링크 :http://www.youtube.com/watch?v=fzQpSORKYr8&feature=c4-overview&list=UUirZA3OFhxP4YFreIJkTtXw
2014.02.20
조회수 16030