-
신인식 교수, 스마트폰 기반 터치사운드 위치파악 기술 개발
〈 왼쪽부터 아니쉬 뱐잔카 석사과정, 김효수 연구교수, 신인식 교수 〉
1분 1초가 소중한 아침 출근 준비 시간, 거울을 보며 양치질을 하는 시간은 유일하게 멍하니 다른 생각을 할 수 있는 순간일 것이다. 만약 양치질 중 거울을 바라보는 것만으로 오늘의 중요한 뉴스, 궁금했던 유튜브 영상, 날씨 등을 미리 확인할 수 있다면 하루를 계획하는 데 큰 도움이 될 것이다.
우리 대학 전산학부 신인식 교수, 김효수 연구교수 연구팀이 가구, 거울 등의 주변 사물들을 터치 입력 도구로 사용할 수 있는 스마트폰 기반의 터치 사운드 위치파악 기술을 개발했다.
이 기술은 사람들이 항상 휴대하는 스마트폰, 태블릿 PC 등을 사용한 기술로, 언제 어디서나 책상 등의 주변 사물들을 가상 키보드로 활용해 장문의 문자, 메일 등을 손쉽게 작성할 수 있고 체스와 같은 보드게임도 즐길 수 있다.
또한 단순 디스플레이 기능만 제공하던 스마트 TV나 거울과 같은 스마트기기에 터치 입력 기능을 삽입해 좀 더 편리하고 효율적인 기기 활용을 할 수 있다.
연구팀이 개발한 시스템은 지난 11월 4~7일 중국 선전에서 열린 모바일 및 센싱 분야의 최고 권위 국제학회 ACM SenSys에서 발표돼 호평을 받았으며, 우수성을 인정받아 ‘베스트 페이퍼 러너-업 어워드(best paper runner-up award)’를 수상했다.
터치 사운드 기반 입력 기술은 다양한 사용 환경에서도 1cm 이내의 오차를 갖는 정확한 터치 입력을 일관성 있게 제공하는 것이 가장 중요하다. 사용자들은 책상, 벽, 거울 등 매번 다른 재질의 사물을 터치 입력 도구로 활용할 수 있어야 하고, 사용 중에도 책이나 가방과 같은 주변 물체의 위치 및 소음 수준이 바뀔 수 있기 때문이다.
연구팀은 사용자가 손톱 등으로 사물을 터치했을 때 발생하는 터치 충돌 소리가 고체 표면을 통해 전달되는 과정을 분석했다.
소리가 공기를 통해 전달될 때와는 달리 고체 표면에 전달될 때에는 주파수에 따라 다른 속도로 전달되는 분산(dispersion) 현상을 겪는다. 분산 현상으로 인해 주파수별로 소리 도달 시간 차이는 소리 전달 거리에 비례해 증가하며, 주변 소음이 변화해도 비례 관계는 변하지 않는다.
김효수 연구교수는 이러한 관찰에 기반해 고체 표면을 통해 전달된 터치 소리를 스마트폰에 녹음하고 간단한 조정 과정을 통해 주파수별 소리 도달 시간 차이와 소리 전달 거리의 관계를 파악했다. 이후 이 값을 이용해 사용자의 터치 입력 위치를 정확하게 계산하는 기술을 개발했다.
개발한 시스템은 약 17인치의 터치스크린에서 평균 0.4cm 이내의 측정 오차를 보였다. 특히 나무 책상, 유리 거울, 아크릴 보드 등 다양한 종류의 사물에서 주변 물체의 위치나 소음이 변하는 상황에서도 항상 1cm 이내의 측정 오차를 기록하는 정확성을 보였다.
특히 기존 기술이 터치 입력 위치파악에만 수백 초 소요되는 것과 달리 정확성과 편리한 사용을 위해 약 10초 이내의 간단한 조정을 통해 기술을 적용하는 데 성공했다. 연구팀은 실제 사용자를 대상으로 한 실험에서도 사용자 경험 및 정확성 등 모든 지표에서 긍정적인 반응을 얻었다고 밝혔다.
신 교수는 “우리가 주위에서 흔히 볼 수 있는 거울, 책상, 벽 등의 표면을 마치 터치스크린처럼 사용할 수 있다면 재미있고 유용한 앱들이 많이 활성화될 것이다”라며 “이 기술은 마이크로폰 3~4개 설치만으로도 터치 입력을 가능하게 하는 새로운 터치 인터페이스 기술이다”라고 말했다.
이번 연구는 Microsoft Research Asia(마이크로소프트연구소 아시아)의 지원을 받아 수행됐다.
※ 데모 비디오 링크
http://cps.kaist.ac.kr/research/ubitap/ubitap_demo.mp4
□ 사진 설명
사진1. 터치 입력 기술 사용 예제
2018.12.13
조회수 11773
-
유재영, 서민호 연구원, 상용화 가능한 포스터치 센서 개발
〈 유재영 박사과정, 서민호 박사, 윤준보 교수 〉
우리 대학 전기및전자공학부 유재영 박사과정과 서민호 박사(지도교수: 윤준보 교수) 연구팀이 플렉서블 기기에 적용할 수 있는 상용화 수준의 고민감도 투명 유연 포스터치(Force touch) 센서를 개발했다.
이 센서는 스마트폰 뿐 아니라 다양한 곡률에서 사용되는 플렉서블 기기, 헬스케어 웨어러블 기기 등 다양한 터치 인터페이스에 적용 가능할 것으로 기대된다.
유재영 박사과정, 서민호 박사가 공동 1저자로 참여한 이번 연구는 국제 학술지 ‘어드밴스드 펑셔널 머티리얼즈(Advanced Functional Materials)’ 9월 6일자 온라인 판에 게재됐으며, 연구의 우수성을 인정받아 오프라인 저널 후면 표지논문으로 선정됐다.
포스 터치 센서는 인식되는 터치의 위치 정보와 더불어 누르는 압력도 인식 가능한 기술로 실제 스마트폰에 집적돼 한 번의 터치만으로 다양한 기능을 제공할 수 있어 많은 관심을 받고 있다.
최근 포스 터치 센서를 스마트폰 뿐 아니라 플렉서블 기기를 포함한 다양한 응용 제품에 적용하기 위해 마이크로-나노 크기의 미세 구조를 이용한 민감도 및 유연성 향상 연구가 활발히 진행되고 있다.
그러나 기존의 고성능 센서들은 특정 성능만을 향상시킴으로써 실제로 필요한 민감도, 유연성, 투명도, 재현성, 다양한 사용 환경에서의 동작 신뢰성 등의 총체적인 성능을 동시에 만족시키지 못해 상용화에 한계가 있었다.
연구팀은 문제 해결을 위해 포스 터치 센서는 공기를 포함한 간격을 갖는다는 기존 상식에서 벗어나 속이 가득 찬 센서를 개발하는 데 집중했다.
연구팀은 센서 내부에 압력에 따른 유전율 변화를 극대화할 수 있는 금속 나노 입자가 포함된 투명 나노 복합 절연층과, 가해진 압력을 집중시켜 민감도를 높일 수 있는 나노그레이팅 구조를 개발해 고민감도의 투명 유연 포스 터치 센서를 제작하는 데 성공했다.
연구팀은 감지 전극을 감지층의 상하부에 형성한다는 기존 방식에서 벗어나 동일 평면(기계적 중립면)에 배치함으로써 볼펜심 정도의 극대화된 굽힘 정도에서도 성능의 변화 없이 동작하는 것을 확인했다.
또한 대량 양산 시 주요 고려 사항인 대면적 균일성, 제작 재현성, 온도 및 장기 사용에 따른 신뢰성 등 역시 상용화 수준임을 증명했다.
연구팀은 개발한 센서를 맥박 모니터링이 가능한 헬스케어 웨어러블 기기에 적용해 실시간 맥박을 감지해냈다. 또한 국내 포스 터치 센서 기업인 ㈜하이딥과 함께 7인치 대면적 센서를 스마트폰에 실제 장착해 실시간 압력 분포를 확인해 상용화 가능한 수준임을 확인했다.
연구를 주도한 유재영 박사과정은 “간단한 구조, 공정을 이용해 상용화 수준의 포스 터치 센서를 개발했으며, 다양한 실제 사용 환경에서도 높은 신뢰성 수준에서 동작함으로써 사용자 터치 인터페이스와 웨어러블 기기에 널리 활용될 수 있을 것으로 기대한다”며 “연구를 전폭적으로 지원해준 나노종합기술원 이재영 원장님과 임성규 책임님, 그리고 연구재단 관계자분들께 큰 감사를 드린다”고 말했다.
이번 연구는 나노종합기술원 오픈이노베이션 사업과 한국연구재단의 중견연구자 지원사업을 통해 수행됐다.
또한 원천 특허화 활용 특허로 국내 출원 6건, 해외 출원 2건과 함께 ‘어드밴스드 사이언스 뉴스(Advanced Science News)’에 영상 초록과 함께 소개될 예정이다.
□ 그림 설명
그림1. 연구팀이 제작한 대면적 7인치 투명 유연 포스터치 센서
그림2. 연구팀의 후면 표지 논문 이미지
그림3. 스마트 폰 집적 후 압력 감지 확인을 위한 붓글씨 어플리케이션 동작 결과
2018.09.19
조회수 11197
-
투명한 유리벽을 양면 터치 게임 미디어로
- 지난 7월 시그래프 이머징 테크놀로지서 선보여 ‘가장 돋보인 작품’ 선정 -- “투명 디스플레이 패널의 실생활에 적용된 좋은 사례” -
우리 학교 산업디자인학과 이우훈 교수와 전산학과 이기혁 교수 공동연구팀은 투명한 유리의 양면을 터치해 게임을 즐길 수 있는 신개념 게임 미디어 ‘트랜스월(TransWall)’을 개발했다.
이 기술은 지난 7월 21일~25일 미국 애너하임에서 개최된 컴퓨터 그래픽 및 상호작용기술 분야에서 세계적인 학회인 시그래프(SIGGRAPH) 이머징 테크놀로지(Eerging Technologies)에 전시돼 ‘가장 돋보인 작품(Highlight)’으로 선정됐다.
연구팀은 ‘우리 주변의 유리벽을 오락과 커뮤니케이션 매체로 바꿀 수 없을까?’ 라는 생각에서 이번 프로젝트를 시작했다.
‘트랜스월’은 멀티터치가 가능한 두 장의 유리 사이에 홀로그래픽 스크린 필름을 삽입하고 양쪽에서 빔 프로젝터로 유리에 영상을 투영하는 방식이다. 또 유리에 서피스 트랜스듀서(Surface Transducer)를 부착해 터치하면 화면을 통해 직접 소리와 진동을 느낄 수 있다.
이처럼 ‘트랜스월’은 단순한 유리벽처럼 보이지만 사용자들은 시각, 청각, 촉각 정보를 주고받을 수 있는 다감각적 미디어다.
테마파크, 대형 쇼핑몰, 지하철 역사 등과 같은 공공장소에 설치하면 기다리는 지루한 시간에 양쪽에서 콘텐츠를 조작해 게임을 즐길 수 있다.
이와 함께 향후 이러한 양면 터치 상호작용 방식의 장점을 활용하는 다양한 문화적 콘텐츠 개발도 가능할 것으로 전망된다.
이우훈 교수는 “사람들에게 새로운 경험을 제공하는 오락과 소통의 미디어로서 트랜스월을 개발했다”며 “양면 터치 상호작용 방식을 통해 가까운 미래에 상용화될 대형 투명 디스플레이 패널이 실생활에 어떻게 활용될 수 있을지에 대한 하나의 비전을 보여주는 사례”라고 연구의 의의를 밝혔다.
https://vimeo.com/70391422 (트랜스월 소개 동영상)https://vimeo.com/71718874 (SIGGRAPH 2013 전시장면)
□ 그림설명
그림1.트랜스월의 구조
그림2. 트랜스월 옆면
그림3. 유리벽의 양쪽 면을 터치해 게임 등 다양한 미디어로 활용할 수 있다.
그림4. 트랜스월이 시그래프 이머징 테크놀로지에 전시돼 참가자들로부터 뜨거운 관심을 받고 있다
2013.09.12
조회수 14714
-
스마트폰 질병진단 원천기술 개발
- 신개념의 생체분자 검출기술로 휴대용 체외진단 분야에 획기적 원천기술- 화학분야 세계적 학술지 ‘앙게반테 케미’ 1월호(16일자) 표지논문 선정
스마트폰으로도 질병을 진단하는 원천기술이 국내 연구진에 의해 개발됐다.
우리 학교 생명화학공학과 박현규 교수 연구팀이 스마트폰을 비롯한 휴대용 개인기기에 널리 이용되고 있는 정전기방식의 터치스크린을 이용해 생체분자를 검출하는 원천기술을 세계 최초로 개발하는 데 성공했다.
앞으로 병원에 가지 않고도 스마트폰을 가지고 간단한 질병을 진단하는 시대가 열릴 것으로 기대된다.
최근 스마트폰과 같은 휴대용 전자기기에 적용되는 정전기방식의 터치스크린은 일반적으로 손가락의 접촉을 통해 발생하는 터치스크린 표면의 정전용량 변화를 감지해 작업을 수행하도록 설계돼 있다.
연구팀은 DNA가 자체의 정전용량을 가지고 있으며, 농도에 따라 정전용량이 변화한다는 사실에 착안해 정전기방식의 터치스크린을 생체분자 검출에 활용할 수 있을 것이라고 예상했다.
이를 규명하기 위해 연구팀은 대표적인 생체분자인 DNA를 터치스크린 위에 가하고 정전용량 변화량을 감지했다. 실험결과 터치스크린을 이용해 DNA의 유무와 농도를 정확하게 검출할 수 있었다.이 결과에 따라 DNA뿐만 아니라 세포, 단백질, 핵산, 등 대부분의 생체분자가 정전용량을 갖고 있기 때문에 다양한 생체물질의 검출에도 활용될 수 있다는 가능성을 제시했다는 게 이 기술의 큰 특징이다.
박현규 교수는 “모바일 기기 등에 입력장치로만 이용해 왔던 터치스크린으로 생체 분자 등의 분석에 이용할 수 있음을 세계 최초로 입증한 결과”라며 “이 원천기술을 이용해 앞으로 터치스크린 기반의 스마트폰 또는 태블릿 PC 등을 이용해 개인이 질병을 진단하는 시대가 올 것”이라고 말했다.
이와 함께 논문의 제1저자인 원병연 연구조교수는 “현재는 생체분자의 유무 또는 농도만 측정 가능한 단계이며, 앞으로 특정 생체분자를 선택적으로 검출할 수 있는 기술을 개발해 가까운 시일 내에 상용화에 주력할 것”이라고 덧붙였다.
한편, 이번 연구는 지식경제부가 시행하는 ‘산업원천기술개발사업’으로 수행됐으며, 연구의 중요성을 인정받아 화학 분야의 세계적 학술지 ‘앙게반테 케미(Angewandte Chemie International Edition)’ 1월호(16일자) 표지논문으로 선정됐다.
그림1. 터치스크린을 이용한 생체 분자 검출 시스템 모식도 (앙게반테 케미 논문 표지). 휴대용 모바일 기기의 입력장치인 터치스크린 위에서 세포, 단백실, 핵산, 소분자 등의 생체 분자를 검출할 수 있다.
그림2. 정전용량 터치스크린 방식의 한가지인 surface capacitive touchscreen을 이용한 시스템 모식도. 여러 지점을 동시에 접촉했을 때 접촉점의 시료 농도에 따라 터치 신호의 위치가 변하는 원리를 이용한 방법. 동시에 두 개의 미지 시료의 농도를 측정할 수 있다.
그림3. 정전용량 터치스크린 방식의 한가지인 projected capacitive touchscreen을 이용한 시스템 모식도. 현재 스마트폰 등에 쓰이는 터치스크린 방식으로서, 터치스크린 표면 내부에 여러 라인의 전극이 패턴되어 있어, 각 전극의 정전용량 변화를 각각 측정함으로써 여러 접촉 시료의 농도를 동시에 검출할 수 있다.
2012.01.16
조회수 18329
-
종이책보다 읽기 더 편한 전자책 나온다!
- 인간 친화적인 이북 인터페이스 구현해 내 -
스마트폰과 태블릿 PC가 전 세계적으로 빠른 속도로 보급돼 전자책 어플의 활용 빈도가 높아지면서 보다 자연스럽고 편리한 독서기능을 제공하기 위해 점점 진화하고 있다.
우리 학교 IT융합연구소(소장 최준균) 이호원 교수 연구팀이 터치스크린의 간편한 조작을 통해 전자책의 페이지를 손쉽게 넘길 수 있는 ‘스마트 이북 시스템’을 개발했다.
이 기술은 전자책을 이용해 독서를 할 때에도 종이책을 읽는 것과 같은 자연스러운 독서기능을 제공하기 위해 개발됐다.
이번에 KAIST 연구팀이 개발한 핵심기술은 비센서 영역인 베젤(디바이스의 테두리 부분)을 이용한 인식기술이다. 기존 터치스크린 방식은 터치영역 내에서만 인식 할 수 있는 반면, 이 시스템은 터치영역과 베젤영역에서의 이동을 인식할 수 있다.
이 기술을 이용하면 터치스크린의 간편한 조작을 통해 여러 페이지를 넘길 수 있는 페이지 플립핑(Page Flipping), 여러 페이지간의 손쉬운 이동을 돕는 핑거 북마킹(Finger Bookmarking) 등의 명령을 손쉽게 사용할 수 있다.
이와 함께 ▲터치한 손가락 개수 ▲드래그 속도 ▲터치하고 있는 시간 ▲숫자모양의 제스처를 이용해 여러 페이지를 넘길 수 있는 방법을 개발해 이용자의 편리성을 도모한 것이 또 다른 특징이다. 최준균 IT융합연구소장은 “최근 급성장하고 있는 모바일 용 소프트웨어 기술에 대한 핵심 원천기술을 개발해 국가경쟁력이 높아질 것으로 기대한다”고 말했다.
한편, 이호원 교수가 IT융합연구소 지식융합팀 김재정, 김상태 연구원과 함께 개발한 이 기술은 총 11개의 국내 및 해외특허 출원을 진행 중이며 사용자 인터페이스 원천기술에 대한 기술사업화도 곧 진행할 계획이다.유튜브 동영상
http://www.youtube.com/watch?v=PF5BWm_w57I
2012.01.03
조회수 14262
-
‘가상손가락’ 아이디어로 5억 벌었다.
- 황성재 학생 개발 ‘멀티터치 모사기술’, 빅트론닉스과 기술이전계약
학생의 작은 아이디어가 기술로 구현돼 5억 원을 받고 기술이전에 성공했다.
우리학교 문화기술대학원 박사과정 황성재(28세) 학생은 모바일 환경의 태생적 단점인 손가락에 의한 화면가림현상과 디바이스를 한손으로 잡은 상황에서 멀티터치 조작이 매우 불편하다는 아이디어에 착안해, 한 손가락만으로도 핀치 줌인/아웃 등의 멀티터치 기능을 수행하는 가상손가락(Virtual Thumb) 기술을 개발했다.
이 기술은 마치 사용자가 두 손가락으로 명령을 수행하는 것과 동일한 효과를 발휘한다. 즉, 터치 지점의 대응점에 생성되는 가상 손가락을 이용, 실제 터치 동작에 대응하는 움직임을 모사하여 줌인/아웃과 회전각 기반의 다양한 명령을 수행한다.
또한 객체 회전이 필요치 않은 상황에서는 회전각 변화를 통해 다양한 명령을 직관적으로 매칭시킬 수 있다. 이는 별도의 명령 메뉴를 활성화하지 않아도 다양한 명령을 동시수행하게 만드는 기능이다. 코너 영역에서의 줌인 명령의 경우, 화면 중심으로 객체를 이동시키지 않아도 코너만을 효과적으로 줌인하는 것도 가능하다.
기술이전에 성공한 ‘가상손가락’ 기술은 지난해 12월 초 특허청이 주최한 2009 대한민국발명특허대전에서 은상을 수상한 아이디어가 기반이 됐으며, 앞으로 각종 터치기반 기기, 즉 TV 리모트 컨트롤러, 이북(eBook), 휴대폰, 태블릿PC, 내비게이션, 교육용 기기 등의 미들웨어로 적용이 가능하다.
기술이전과 관련해 황성재 박사과정은 “연구 과정에서 창출된 작은 아이디어가 발전돼 실제 기술사업화된다고 생각하니 매우 영광스럽다. 앞으로도 많은 창의적 연구를 통해 학계와 산업에 조금이나마 보탬이 되는 연구자가 되겠다.” 라고 소감을 밝혔다.
한편, 산학협력단(단장 장재석)은 이 아이디어에 대한 시제품 제작 등의 지원과 마케팅활동으로 사업화를 성공시켰으며, 국내 이동전화기 제조업분야의 중소기업인 (주)빅트론닉스와 특허양도비 5억 원에 기술이전 계약을 체결하였다고 18일 밝혔다.
2010.10.19
조회수 15720