본문 바로가기 대메뉴 바로가기

KAIST

연구뉴스

홈페이지 통합검색

-

%EA%B0%80%EC%83%81%EC%8A%A4%ED%94%BC%EC%BB%A4

공간을 자유자재로 누비는 가상스피커 개발 김양한 교수 - 3D 입체 영상과 결합해 진정한 3D TV 시대 임박 -- 이론적, 실용적 측면 모두 해결해 곧 상용화 예정 - 원하는 공간 어디서나 마치 스피커가 놓여 있는 것처럼 소리를 들을 수 있는 시스템이 개발돼 곧 상용화 예정이다. 우리 학교 기계공학과 김양한, 최정우 교수 연구팀이 공동으로 3차원 공간상에 자유롭게 가상스피커를 배치할 수 있는 ‘사운드 볼 시스템’을 개발했다. 이번에 개발된 시스템은 원하는 공간상의 위치에 자유자재로 소리를 집중시킬 수 있다. 따라서 3D TV에 적용하면 마치 소리도 사람에게 다가오는 것처럼 느껴져 시각과 청각 모두 3D 기능을 갖춘 진정한 의미의 3D TV를 경험할 수 있게 됐다. 또 오케스트라의 바이올린, 첼로 등 현악기와 플루트, 클라리넷 등의 관악기 소리를 원하는 공간에서 나게 조절할 수 있어 집안에서도 마치 실제 콘서트홀에 온 것 같은 느낌을 받을 수 있다. 게다가 여러 가지 소리를 개별적으로 제어가 가능해 방송국 음향 편집에도 활용될 수 있으며, 자동차에서는 각 좌석별로 네비게이션, 음악, TV 소리 등을 따로 전달하는 등 적용범위가 매우 다양할 것으로 예상된다. 사운드 볼 시스템은 여러 개의 스피커를 이용해 공간상의 원하는 지점에 음향 에너지를 집중시킨 후, 집중된 지점에서 다시 전파되는 소리를 이용해 가상 스피커를 만드는 기술이다. 이 기술은 2002년 김 교수팀이 미국음향학회(Acoustical Society of America)에 발표한 청취공간에 있는 사람만 소리를 듣고, 다른 영역에서는 조용하게 하는 음향 밝기·대조 기술을 발전시킨 것으로 음향 에너지 집중을 통해 소리의 방향, 움직이는 소리 및 소리의 공간감을 제어할 수 있다. 연구팀은 먼저 가상스피커에 대한 이론적 해를 완전한 적분방정식 형태로 세계 최초로 풀어내 3차원 공간 어디에서도 구현 가능하도록 했다. 이와 함께, 여러 개의 단극 음원을 조합한 다극음원(multipole)을 사용하고 지향성(directivity) 조정을 통해 원하는 음장을 만들어 탁월한 청취 선명도를 이끌어 냈다. 김양한 교수는 ”2002년 논문부터 시작된 음향제어분야의 새로운 이론적 토대를 마련한 것은 중요한 의미가 있다“며 ”이 기술을 바탕으로 지난 9월 국내 굴지 전자업체와 TV용 3차원 음향시스템 개발을 착수했다“고 말했다. 최정우 교수는 “앞으로 홈씨어터, 영화관, 공공장소 등에서 개발된 시스템이 사용되면 새로운 3차원 음장 기술이 가지고 있는 효과를 느낄 수 있을 것이다”며 “3차원 영상 기술과 함께 통합돼 새로운 영상과 음향의 세계를 경험할 날이 멀지 않았다”고 말했다. 한편, 연구팀은 이번 기술에 대한 특허출원을 완료했으며, 관련 논문은 지난 달 관련 분야 최대 학술단체인 국제전기전자공학회(IEEE)가 발간하는 국제저널(IEEE Transaction of Audio, Speech, and Language Processing)에 게재됐다. ※ 기술 개요(소리의 공간감을 자유자재로 누구나 요리해 맛볼 수 있는 기술) 오래도록 우리는 완벽한 3D사운드 혹은 소리의 공간감의 완전한 재현이 가능한 이상적인 오디오 시스템을 꿈꾸어 왔다. 그러나 3D사운드는 그 정의가 명확하지 않은 주관적인 개념이며, 그 평가에 대한 절대적인 척도 또한 존재하지 않는다. 최근 다양한 3D sound 기법이 난립하고 있으나, 이는 청취 환경에 따라 변화할 뿐만 아니라, 동일한 환경에서도 청취자가 누구냐에 따라 다르게 인지되는 근본적인 문제점을 내포하고 있다. 음장 재현 방법의 이러한 근본적인 문제는 과거의 스테레오 시스템에서 볼 수 있는 밸런스 노브(balance knob)로부터 그 해결의 실마리를 찾을 수 있다. 즉, 밸런스 노브는 보편적인 최적의 소리를 찾는 대신에 청취자가 원하는 음향 효과를 얻을 때까지 직접적으로 소리를 청취하고, 스스로 조절해 평가할 수 있는 매개체의 역할을 수행한다. KAIST에서 개발한 Spatial Equalizer는 밸런스 노브와 같이 청취자가 원하는 3D 사운드를 스스로 평가하고 조절하기 위한 것이다. 즉, 청취자가 시공간적으로 원하는 3D사운드를 실시간으로 청취하고 변화시킬 수 있는 인터페이스의 개념 및 구현에 초점을 맞추고 있다. Spatial Equalizer는 인터페이스 상에서 하나의 점 또는 다수의 점으로 표시되는 가상 음원을 사용자가 조종함으로써 소리의 공간감을 제어할 수 있는 길을 열어 주고 있다. 이는 다수의 점 음원들의 위치를 변화시키거나 각 점에 위치한 가상 음원의 크기를 변화시킴으로써 청취자가 원하는 소리를 구현하는 원리다. 즉, 사용자가 원하는 소리의 공간감을 공간상에 위치하는 몇 개의 가상 음원의 조합으로 대치하고, 실제로 사용자는 원하는 공간감과 듣는 소리가 부합되도록 하나 또는 다수의 가상 음원의 위치 및 각 음원에 의한 소리의 크기를 조절하는 것이다. 여기서, 원하는 공간감을 얻기 위한 기본적인 요소로서의 가상 음원을 sound ball이라 정의하고 사용하기로 한다. 가상의 sound ball 혹은 가상의 스피커를 자유롭게 공간상에 만들어 내기 위해 스피커 어레이 제어 기술의 혁신이 필요하다. 다수의 스피커로 이루어진 스피커 어레이(loudspeaker array)를 사용하면 소리(sound)가 전파하는 모양을 자유자재로 만드는 것이 가능함은 잘 알려져 있다. 다수의 스피커를 개별적인 크기와 위상으로 구동하면, 각각의 스피커를 중심으로 하는 다수의 파면이 형성되고, 이들이 공간상에서 간섭(interference)되면서 고유의 형상을 갖게 되는 원리이다. 1678년 발표된 호이겐스(Huygens)의 원리로부터, 키르히호프-헬름홀츠(Kirchhoff-Helmholtz) 적분 방정식에 이르는 이론식이 관련 연구의 배경을 이루고 있다. 하지만, 이러한 이론들은 어디까지나 우리가 만들고자 하는 가상의 스피커, 즉 음원(sound source)이 공간 외부에 존재하는 경우에 적용할 수 있으며, 소리를 재현하고자 하는 공간 내부에 음원이 있을 경우는 물리적으로 불가능한 문제가 된다. 기존 WFS(wave field synthesis)등 관련 연구에서는 근사화한 적분 방정식을 사용하여 시간 역전(time-reversal)의 형태로 내부의 음원이 발생시키는 것과 유사한 음장을 만들어 낼 수 있음을 부분적으로 밝혀졌으나, 물리적으로 발생 가능한 이유와 온전한 형태의 해에 대해서는 알려진 바가 없었다. KAIST에서는 온전한 적분 방정식 형태로 일반해가 존재함을 수학적으로 밝혀내었으며, 이에 따라 전 3차원 공간에서 임의의 위치의 sound ball을 형성할 수 있는 이론적 토대를 마련하였다. 개발된 sound ball 형성 알고리듬을 사용하여, Spatial Equalizer를 실제 오디오 시스템의 형태로 구축하였다. 이 시스템의 목적은 다수의 sound ball을 사용자가 원하는 임의의 지점에 형성하는 것이므로, 이것을 고려하여 24개의 스피커로 이루어진 선형 어레이 및 50개 스피커로 구성된 구형 어레이를 제작하였다. 사용자와 Spatial Equalizer® 사이에 피드백이 실시간으로 이루어지는 제어를 수행하기 위해 스마트 폰을 사용하여 원거리에서 sound ball을 제어할 수 있는 장치를 구현하였다. 이 인터페이스는 OSC(Open Sound Control) 프로토콜을 사용함으로써 제어 장치인 스마트 폰과 호스트 PC가 원거리에서도 제어 변수를 주고 받을 수 있도록 하였다. 즉, 각각의 sound ball의 위치 및 크기가 Spatial Equalizer®의 노브로서 작동하게 되어, 사용자는 Sound ball의 위치와 크기를 조절함으로써 의도하는 소리의 공간감을 직관적으로 형성할 수 있다. 음식을 만드는 경우와 비유적으로 설명하면, sound ball을 이용하여 이제는 사용자가 원하는 시.공간적 소리를 만들 수 있게 된 것이다. 종래에는 특별한 청취 능력을 가진 사람이 이러한 소리를 만드는 즉 특별한 요리사 만이 소리의 공간 감을 만들 수 있었다 하면 이제는 이 기술을 이용하여 모든 사람이 자신이 느끼기에 좋다고 생각하는 소리를 공간상에 만들 수 있는 “소리 만들기” 요리 법과 도구를 가지게 된 것이다. 그림1. 여러 개의 스피커를 통해 가상다극음원을 만들었다. 지향성 조정을 통해 수렴음장을 제거했으며, 가상스피커로부터 원하는 음장을 재현했다. 그림2. 사운드 볼 시스템 개념도 그림3. 5.1채널 방식의 서라운드 스피커(좌)와 가상스피커(우) - 실제 피아노가 시청자 바로 앞에 놓인 것과 같은 소리를 들을 수 있다. 그림4. 사운드 볼이 형성 및 이동하면서 소리가 TV에서 튀어나오는 것과 같은 느낌을 받는다.
2012.10.10 조회수 17243

34141 대전광역시 유성구 대학로 291 한국과학기술원(KAIST) T.042-350-2114 F.042-350-2210(2220)

Copyright (C) 2020, Korea Advanced Institute of Science and Technology, All Rights Reserved.