-
세계 최고 속도 입체적 조명 기술 개발
디스플레이(조명) 기술에서는 고속화가 아주 중요한 성능 중 하나로 꼽힌다. 최근 주요 스마트폰 제조사들은 화면 전환 속도가 기존의 초당 60회보다 크게 향상된 초당 120회의 고속 디스플레이를 선보였다. 이런 고속 디스플레이를 탑재한 모델의 이용자들 사이에 ‘한번 경험하면 예전으로 돌아갈 수 없다’는 말이 회자될 정도로, 고속화는 상업적인 가치도 크다고 볼 수 있다.
우리 대학 바이오및뇌공학과 장무석 교수 연구팀이 북해도대학 전자과학연구소의 시부카와 아츠시 부교수, 미카미 히데하루 교수, 오카야마대학 의·치·약과학과의 스도 유키 교수 연구팀과 공동연구를 통해 세계 최고속의 3차원 광 패턴 조명 기술*을 개발하는 데 성공했다고 15일 밝혔다.
*광 패턴 조명 기술: 빛을 특정 패턴이나 형태로 조절하여 원하는 조명 효과를 얻는 기술
광 패턴 조명 기술은 우리에게 친숙한 디스플레이나 빔프로젝터에서 찾아볼 수 있다. 디스플레이나 빔 프로젝터 내부에는 원하는 이미지나 모양 등을 화소 단위로 만들어낼 수 있는 광 패턴 조명 장치인 공간 광 변조기*가 사용되고 있다. 이외에도 광 패턴 조명 기술은 최근 주목받는 가상 현실 기술 분야의 핵심 요소 기술인 3차원 디스플레이 기술에도 사용되며, 산업 분야에서는 금속 가공, 연구 분야에서는 뇌 심부 이미징을 위한 레이저 스캐닝 현미경 등에 사용되고 있다.
*공간 광 변조기: 빛을 화소 단위로 조작하여 원하는 이미지나 모양을 만들어내는 장치로, 빔 프로젝터나 3차원 디스플레이 기술 등에 사용되는 장치
하지만 공간 광 변조기는 조명 패턴의 전환을 고속으로 수행하는 데 큰 한계를 겪고 있었다. 현재 시판되는 공간 광 변조기는 액정형 디스플레이 장치나 디지털 미러 장치가 있지만, 통상적인 전환 속도는 50마이크로초에서 10밀리초 수준으로 제한되며, 원리적으로 이보다 더 빠르게 만드는 데에는 기술적 어려움이 있었다.
연구팀은 공간 자유도-시간 자유도 사이의 치환 개념을 개발하고, 이를 독자 개발한 초고속 1차원 광 변조기와 산란 매질*을 결합하여 구현하는 방식으로, 시판되는 공간 광 변조기보다 약 1,500배 빠른 30나노초의 전환 속도를 갖는 세계 최고 속도의 3차원의 조명(디스플레이) 기술을 개발했다.
*산란 매질: 안개나 물방울 맺힌 유리창처럼 빛을 무질서하게 굴절시키는 물질
연구팀은 빛의 전파를 교란하는 산란 매질의 특성을 역이용해 1차원의 광 패턴을 사용자가 원하는 3차원의 패턴으로 변환하기 위해 복잡 광 파면 조작 기술을 핵심 기술로 활용했다.
연구팀이 개발한 세계 최고 속도의 광 패턴 조명 기술은 특정 각도에서만 볼 수 있는 기존의 2차원 유사 홀로그램과 달리 실제로 3차원 공간상에 광 정보를 재구성해 입체 영상을 만드는 기술로 활용될 수 있다. 그뿐만 아니라 광유전학 기술에 기반한 뇌 신경 조절 기술과 같은 생체 조절 기술의 고속화·대규모화나 금속 3D 프린터 등의 광 가공 생산 효율 향상 등, 다양한 분야에서 응용될 전망이다.
*광유전학 기술: 빛을 이용해 살아있는 생물 조직의 세포를 제어하는 기술
해당 연구 결과는 바이오및뇌공학과 송국호 박사과정이 공저자, 장무석 교수가 교신저자로 참여했으며 국제 학술지 `네이처 커뮤니케이션즈(Nature Communications)' 2024년 4월 8일 온라인판에 게재되었다. (논문명 : Large-volume focus control at 10 MHz refresh rate via fast line-scanning amplitude-encoded scattering-assisted holography)
이번 연구는 과학기술정보통신부 한국연구재단이 주관하는 선도연구센터사업(컬러변조 초감각 인지기술 선도연구센터), 우수신진연구자 사업, 삼성미래기술육성사업, 국토교통부 국토교통과학기술진흥원이 주관하는 차세대 대인 보안검색 기술 개발 사업의 지원을 받아 수행됐다.
2024.04.15
조회수 3939
-
카이캐치(KaiCatch), 악성 동영상 위변조 탐지 기술 개발
우리 대학 전산학부 이흥규 명예교수 연구팀이 KAIST 창업기업인 ㈜디지탈이노텍의 후원으로 악성 위변조에 활용되는 프레임 업 변환, 보간법에 의해 생성된 프레임, 영상내 위변조 영역 등을 탐지하는 동영상 위변조 탐지 기술을 개발했다.
위변조 분야 최상위 저명 논문지인 Forensic Science International 11월호에 논문으로도 발표했다.
CCTV의 대량 보급과 함께 동영상은 수많은 분쟁시 주요 증거물로 사용되고 있다. 그러나 동영상에 대한 편집 도구 기술과 인공지능 기술 발전과 함께 동영상의 편집, 프레임 삭제 및 추가 등의 위변조를 포함하여 프레임 업 변환 이라는 기술을 사용하여 위변조 동영상을 고품질 영상으로 변환함으로써 위변조 동영상을 원본과 유사하게 변환함으로써 위변조 탐지를 더욱 어렵게 하는 악성 변조 기술 등도 등장하고 있다.
이번 연구에서는 동영상내 특정 영역들의 편집 변조를 포함하여 프레임 추가, 삭제, 프레임률 변환 탐지를 포함하여 공간정보와 시간정보를 연속적으로 활용하는 프레임-업 변환을 탐지하기 위해 프레임-업 특징들을 추출하는 4개 유형의 네트워크블럭들과 보팅(voting) 기능을 채택한 프레임-업 탐지 뉴럴 네트워크를 제시하였다.
개발된 기술은 특히 동영상의 극히 작은 영역들의 정보를 사용하여 무결성 여부를 판독하기 때문에 동영상 위변조 탐지를 고속으로 수행할 수 있어 기존 기술들과 비교하여 기술의 유용성과 실용성이 매우 뛰어나다.
이번 연구는 KAIST 윤민석 박사, ㈜네이버웹튠AI의 남승훈 박사 등이 참여하였으며 KAIST에서 위변조를 잡아낸다는 의미인 카이캐치(KaiCatch) 위변조 탐지 소프트웨어 기능을 동영상으로도 크게 확장 했다는 점에서 그 의미가 있다.
개발된 기술은 영상 위변조 분야 최상위 저명 논문지인 Forensic Science International 2022년 11월호(Vol 340)에 ‘Frame-rate Up-conversion Detection based on Convolutional Neural Network for Learning Spatiotemporal Features’ 논문으로 발표 되었다. 본 연구는 한국연구재단 창의도전연구기반지원사업과 KAIST 창업기업인 ㈜디지탈이노텍의 후원으로 수행하였다.
2022.10.20
조회수 7179
-
인공지능 엔진으로 영상 위변조 탐지 기술 개발
우리 연구진이 영상 내 변형 영역을 더욱 정밀하게 탐지하기 위해 영상내 색상 정보와 주파수 정보를 함께 활용하는 인공지능 엔진 기술을 학계 처음으로 개발했다. 이번 개발 기술은 기존 기술보다 정밀도와 정확도를 크게 높여 위변조 탐지 기술의 기술 유용성을 일정 수준 확보할 수 있는 기반을 제공한다는 점에서 그 의미가 크다. KAIST에서 각종 위변조 영상들을 잡아낸다는 의미를 지닌 `카이캐치(KaiCatch)' 소프트웨어는 이미지, 영상뿐만 아니라 CCTV 비디오 변형 여부도 분석할 수 있다.
우리 대학 전산학부 이흥규 교수 연구팀이 새로운 인공지능 구조와학습 방법론, 그리고 실험실 환경에서는 구하기 힘든 고급 변형 이미지 영상들을 사용해 영상 이미지 위변조 탐지 소프트웨어인 `카이캐치(KaiCatch)'의 영상 이미지 정밀도와 정확도를 크게 높일 뿐만 아니라 비디오 편집 변형도 탐지할 수 있는 카이캐치 2.1 버전을 개발했다고 13일 밝혔다.
카이캐치 소프트웨어는 `이상(異常) 유형 분석 엔진'과 `이상(異常) 영역 추정 엔진' 두 개의 인공지능 엔진으로 구성된다. `이상 유형 분석 엔진'은 블러링, 노이즈, 크기 변화, 명암 대비 변화, 모핑, 리샘플링 등을 필수 변이로 정의해 이를 탐지하며 `이상 영역 추정 엔진'은 이미지 짜깁기, 잘라 붙이기, 복사 붙이기, 복사 이동 등을 탐지한다. 이번에 새로 개발한 기술은 `이상 영역 추정 엔진'으로 기존 기술에서는 이상 영역 탐지 시 그레이 스케일(회색조)로 이상 유무를 탐지하였으나 분석 신호의 표현력이 낮고 탐지 오류가 많아 위변조 여부 판정에 어려움이 많았다. 이번에 개발된 기술은 색상 정보와 주파수 정보를 함께 활용해 정밀도(precision)와 재현율(recall)이 크게 향상되고 변형 영역을 컬러 스케일로 표현함으로써 해당 영역의 이상 유무뿐만 아니라 위변조 여부도 더욱 명확하게 판별이 가능해졌다.
연구팀은 이번 연구에서 영상 생성 시 발생하는 흔적과 압축 시 발생하는 흔적 신호들을 함께 분석하기 위해 색상 정보와 주파수 정보를 모두 활용하는 접근 방법을 학계 처음으로 제시했다. 또 이러한 방법론을 설계 구현하기 위해 주파수 정보를 하나의 분할 네트워크에서 직접 입력으로 받아들이는 방식의 ‘압축 왜곡신호 탐지 네트워크(Compression Artifact Tracing Network, 이하 CAT-Net)’을 학계 최초로 개발하고 기존 기법들과 비교해 탐지 성능이 크게 뛰어남을 입증했다. 개발한 기술은 기존에 제시된 기법들과 비교할 때 특히 원본과 변형본을 판별하는 평가 척도인 F1 점수, 평균 정밀도(average precision)에서 대단히 뛰어나 실환경 위변조 탐지 능력이 크게 강화됐다.
비디오 편집 변형의 경우도, 프레임 삭제, 추가 등에 의한 편집 변형이 흔히 CCTV 비디오 등에서 발생한다는데 착안해 이러한 비디오 편집 변형을 탐지하는 기능 역시 이번 카이캐치 2.1 버전에 탑재됐다.
이번에 카이캐치 2.1 소프트웨어를 연구 개발한 이흥규 교수는 "영상 이미지 위변조 소프트웨어인 카이캐치를 휴대폰에 탑재되는 안드로이드 앱 형태로 일반에 소개한 2021년 3월 이후 현재까지 카이캐치 앱을 통한 900여 건의 위변조 분석 의뢰와 개별적으로 60건이 넘는 정밀 위변조 분석 의뢰를 받았다. KAIST 발표 논문 수준이나 실험 결과 등을 감안할 때 위변조 분야 최고 기술로 만든 소프트웨어인데, 오탐지율이 높아 실제 탐지 정밀도가 이론치보다 매우 낮았다. 많은 경우 위변조나 변형 여부에 대한 명확한 기술 판정이 불가능했으나 이번에 개발한 카이캐치 2.1 은 CAT-Net이라는 새로운 네트워크 구조와 학습 방법론, 그리고 ‘색상 및 주파수 영역 왜곡 흔적 동시 분석’이라는 첨단 기술을 사용해 정밀도를 높여, 보다 명확한 판별이 가능하도록 개발됐다. 앞으로 영상 위변조 판단 여부가 어려운 경우가 많이 줄어들기를 기대한다”고 말했다.
이 교수는 이어 "비디오는 MP4 파일 포맷이, 그리고 영상 이미지는 JPEG 이미지들이 일반인들이 널리 사용한다는 점에서 해당 포맷을 주 개발 대상으로 삼았다. 영상 이미지의 경우 영상 편집 변형 시 영상에 남겨지는 인위적으로 발생하는 JPEG 압축 미세 신호 탐지에 주안점을 두어, 위변조 여부와 위변조 영역을 잡아내는 것에 집중했다. 비디오의 경우 특정 프레임들을 삭제하거나 삽입하는 경우, 프레임 부분 편집 후 재압축 하는 경우 등을 탐지한다. 최근 CCTV 비디오 편집 여부에 대한 분쟁이 많아 크게 도움을 줄 수 있을 것으로 기대하며 향후에도 지속적으로 연구 개발해 취약점들을 보완해 나갈 계획이다ˮ 고 덧붙였다.
현재 카이캐치 소프트웨어는 안드로이드 기반 휴대폰의 구글 플레이스토어에서 ‘카이캐치’를 검색하여 앱을 다운로드 받아 설치한 후, 영상 이미지들을 카이캐치에 업로드하면 위변조 여부를 간단하게 테스트해 볼 수 있다.
한편 이번 연구는 제1 저자로 참여한 우리 대학 전기및전자공학부 권명준 박사, 그리고 김창익 교수, 남승훈 박사, 유인재 박사 등과 공동으로 수행됐으며, `스프링거 네이처(Springer Nature)'에서 발간하는 컴퓨터 비전 분야 톱 국제저널인 `국제 컴퓨터 비전 저널(International Journal of Computer Vision, IF 7.410)'에 2022년 5월 25일 字 온라인판에 게재됐다. (논문명 : Learning JPEG Compression Artifacts for Image Manipulation Detection and Localization)
이번 연구는 한국연구재단 창의도전연구기반지원사업지원과 KAIST 창업기업인 ㈜디지탈이노텍(http://www.kaicatch.com/) 과의 산학협력 연구로 수행됐다.
2022.06.13
조회수 7670
-
기존 기술의 한계를 뛰어넘는 새로운 메타표면 설계 방법 제시
우리 대학 전기및전자공학부 장민석 교수 연구팀이 미국 위스콘신 대학 빅터 브라 교수 연구팀과의 공동연구를 통해 기존 한계를 뛰어넘는 360°동적 위상변조가 가능한 메타표면 설계 기술을 개발했다고 2일 밝혔다.
메타표면은 자연상에 존재하지 않는 물성을 띄도록 새롭게 만든 매우 얇은 2차원 평면구조를 뜻한다. 라이다(LIDAR), 분광기, 투명 망토, 홀로그램 등 미래 기술을 구현할 수 있는 파면 제어 기술의 강력한 후보임과 동시에 나노미터 수준의 소자 크기로 인해 기존의 전자회로 칩에 집적할 수 있어 주목받고 있는 기술이다.
메타표면을 이용해 파면 제어 기술을 구현하기 위해서는 빛의 진폭과 위상을 제어할 수 있는 능력이 필수적이다. 그러나 동적으로 빛의 위상을 360°제어하는 기술은 구현 난이도가 매우 높아, 기존 연구에서는 위상을 제어하는 데 성공하더라도 얻을 수 있는 빛의 진폭이 매우 낮다는 한계가 있었다.
전기및전자공학부 장민석 교수와 빅터 브라 미국 위스콘신 대학 교수 연구팀은 이러한 한계를 극복할 수 있는 360°동적 위상변조가 가능하면서도 크고 일정한 빛의 진폭을 얻을 수 있는 메타표면 설계 기술을 개발했다.
동적 360°위상 제어 문제가 매우 어려운 이유는 메타표면의 동작원리와 관련이 있다. 메타표면은 보통 입사하는 빛이 메타표면 구조와 상호작용하여 일으키는 진동에 기반해 동작하는데, 동적 360°위상 제어를 하기 위해서는 광학 진동 주파수는 크게 변해야 하는 반면 진동 폭은 최소화된 채로 유지돼야 한다. 그러나 전기적으로 메타표면의 광학 진동 주파수를 조정하기 위해서는 메타표면에 들어오고 나가는 전자의 흐름을 원하는 대로 조절할 수 있어야 하는데, 이것은 필연적으로 진동 폭을 크게 만들어 두 가지 조건을 동시에 만족하기 어렵게 한다.
또한, 광학에서의 위상과 진폭은 비선형적으로 복잡하게 얽혀 있어 일반적으로 위상을 조절할 때 진폭을 일정하게 유지하는 것이 매우 어렵다.
연구팀은 특수한 성질을 가진 두 가지 광학 공진을 이용해 이러한 문제를 해결했다. 하나는 위상과 진폭 특성이 분리되어 있어 위상이 변할 때 큰 진폭을 유지할 수 있는 광학 공진이고, 다른 하나는 위상 변조 범위가 커 360°제어를 가능케 하는 광학 공진이다. 연구팀은 이 두 가지 광학 공진을 결합함으로써, 동적 360°제어가 가능하면서도 일정한 진폭을 유지할 수 있는 메타표면을 구현했다.
연구팀이 개발한 기술은 소자의 구조와 공진의 특성을 조절함에 따라 어떤 주파수 영역에도 적용 가능한 장점이 있다. 연구팀은 개발한 기술을 사용해 중적외선 대역에서 동작하는 그래핀 나노 리본 기반 메타표면 소자를 설계했으며, 65%의 일정한 반사계수를 유지하면서도 540°의 위상변조가 가능함을 전자기 시뮬레이션을 통해 확인했다.
장민석 교수는 "이번 연구를 통해 기존의 동적 위상변조 기술의 한계를 뛰어넘는 새로운 메타표면 설계 방법을 제시했다ˮ라며 "파면 제어 기술을 활용한 라이다와 홀로그램 등 차세대 광학 소자 개발에 도움을 줄 것으로 기대된다ˮ라고 말했다.
우리 대학 김주영, 박주호 연구원이 공동 제1 저자로 참여한 이번 연구는 국제 학술지 `네이처 커뮤니케이션즈 (Nature Communications)'에 4월 19일 字로 출판됐다. (논문명 : Full 2π Tunable Phase Modulation Using Avoided Crossing of Resonances).
2022.05.02
조회수 7599
-
딥페이크 탐지 모바일 앱 서비스 개시
우리 대학 전산학부 이흥규 교수 연구팀이 인공신경망 기반 딥페이크(deepfake) 탐지와 사진 위변조 탐지 소프트웨어인 `카이캐치(KaiCatch)'를 모바일 앱 형태로 개발해 서비스를 시작한다고 30일 밝혔다. 이는 디지털콘텐츠 위변조 탐지가 필요한 공공기관, 산업계, 언론 및 방송사, 각종 포털 종사자들 및 일반인들도 손쉽게 활용할 수 있을 것으로 기대된다.
이번 모바일 앱 서비스는 본격적으로 일반인들도 손쉽게 디지털콘텐츠 위변조 탐지 기술을 활용할 수 있도록 실용화 단계로 들어섰다는 점에서 의미가 크다. KAIST에서 딥페이크 영상을 포함해 각종 위변조 사진들을 잡아낸다는 의미를 지닌 `카이캐치(KaiCatch)' 소프트웨어를 모바일 앱 형태로 개발해 서비스를 시작하는데 이러한 유형의 서비스로는 국내 최초다. 구글스토어에서 `카이캐치'를 검색해 앱을 다운로드하면 간단하게 딥페이크 및 이미지 위변조 분석을 할 수 있다.
주로 사람의 얼굴을 대상으로 하는 딥페이크 기술은 얼굴 교체, 얼굴 재현, 얼굴 속성 변환으로 크게 3가지 유형으로 나눌 수 있다. 그중 얼굴 교체와 얼굴 재현은 악의적으로 사용할 때 가짜 뉴스로 사회적 큰 혼란을 일으킬 수 있고 음란물 제작 등에도 악용돼 개인의 인권을 크게 침해할 수 있다. 또한, 얼굴 속성 변환은 영상 증거를 조작하는데 악용될 수 있다.
연구팀이 개발한 기술은 딥페이크 생성 유형에 상관없이 딥페이크 여부를 탐지하기 위해 영상의 미세 변형 신호 흔적과 미세 이상 신호 흔적 탐지 기술을 적용한 신호처리 및 인공지능 기술로 개발됐다. 이러한 핵심 기술들을 사용해, 얼굴 영역의 미세 변형과 코, 입, 얼굴 윤곽 등 얼굴 내 기하학적 왜곡 발생 가능 영역의 이상 신호 흔적을 분석해 딥페이크를 탐지한다.
딥페이크 탐지 기술의 경우, avi 나 mp4 형식의 딥페이크 의심 동영상이 주어지면 개별 프레임으로 자른 뒤 분석하고자 하는 프레임을 이미지로 변환 후 딥페이크 탐지를 수행한다. 동영상 내의 얼굴이 지나치게 작거나(해상도 128×128 이하) 동영상 내 사람 얼굴이 상당 부분 잘린 경우가 아니면 정상적인 탐지가 가능하다. 따라서 동영상의 한 프레임을 잘라 이미지로 만들어 카이캐치 앱에 업로드하면 손쉽게 딥페이크 여부를 확인할 수 있다. 분석 결과는 0에서 100 (%) 값으로 표시되며 숫자가 높을수록 딥페이크일 확률이 높은 것으로 판단한다.
사진 위변조 탐지 기술의 경우도 마찬가지로 카이캐치 앱에 해당 이미지를 업로드하면 위변조 분석 결과를 받아 볼 수 있다. 카이캐치는 BMP, TIF, TIFF, PNG 등 무압축, 무손실 압축을 포함해 50여 개의 표준 양자화 테이블과 1,000여 개가 넘는 비표준화된 양자화 테이블에 기반한 JPEG 이미지들도 모두 처리할 수 있다. 사진 위변조가 의심되는 이미지를 업로드하면 해당 이미지를 분석한 결과를 시각화한 두 장의 분석 이미지를 도출하며, 분석 이미지 내에 위변조가 의심되는 특징들이 포함된 주요 영역들이 다른 주변 영역들과 색상이 크게 다르거나, 또는 주요 영역들에만 다양한 색상들이 혼재해 나타나면 해당 영역이 위변조된 것으로 일반인들도 간단하게 판단할 수 있다.
이번에 개발한 모바일용 위변조 탐지 앱 개발은 국내 최초이자 선진국에서도 찾기 어려운 위변조 탐지 앱 서비스 기술이다. 이흥규 교수는 "카이캐치는 인공지능과 미세 이상 신호 흔적 분석 기법이라는 첨단 기술을 사용해 다양한 유형의 변형에 대응한 범용성을 가지도록 개발됐다”며 "우리가 예측하지 못하거나 모르는 변형 기법을 사용해도 90% 내외의 높은 신뢰도로 탐지한다”고 말했다.
이 교수는 이어 "이번에는 안드로이드 기반의 모바일 환경에서만 동작하는 앱 서비스 기술로 개발됐지만 가까운 기간내 애플 iOS 기반의 앱 출시와 함께, 영어, 중국어, 일어 앱 들도 출시하려고 한다ˮ며 "기존 탐지 기법과는 매우 상이한 기법들을 사용한 위변조 탐지 기술도 실용화해 카이캐치에 추가 탑재 운용함으로써, 탐지가 안 되는 각종 예외 경우들을 대폭 줄이도록 노력하겠다ˮ 고 덧붙였다.
한편 이번 연구는 KAIST 창업기업인 ㈜디지탈이노텍(http://www.kaicatch.com/) 과 산학협력 연구로 수행됐다.
2021.03.31
조회수 88515
-
사진 위변조 탐지하는 실용 소프트웨어 개발
위조되거나 변조된 사진·영상자료를 손쉽게 탐지해내는 고성능 소프트웨어가 우리 연구진에 의해 개발됐다. 이 기술은 논문 발표 수준에만 머물러 있던 사진과 영상자료의 위·변조 탐지기술을 국내 최초로, 세계에서 두 번째로 실용화 단계로 끌어 올렸다는 점에서 의미가 크다.
우리 대학 전산학부 이흥규 교수 연구팀이 인공신경망을 이용해 디지털 형태의 사진 변형 여부를 광범위하게 탐지하는 실용 소프트웨어 `카이캐치(KAICATCH)'를 개발했다고 3일 밝혔다.
최근 딥페이크(deepfake)를 포함해 각종 위·변조 영상의 등장과 온라인 유통으로 인한 위·변조 탐지기술에 관한 관심이 급속히 증가하고 있다. 그러나 위·변조 여부를 직접 확인할 수 있는 객관적인 분석 도구가 없기 때문에 사실확인 작업이나 정황 판단 등에 의존해 진위를 판단함으로써 주관적 판단 여부의 논란 등 문제가 자주 발생하고 있다.
특히 기존의 디지털사진 포렌식 기술은 개개 변형의 유형에 대응해 개발돼서 변형 유형이 다양하거나, 사전 특정되기 전에는 일정 수준 이상의 높은 신뢰도를 확보하기가 어렵다. 즉, 기존 기술들은 제한된 형식과 알려진 특정 변형에 대해서는 만족할 만한 탐지 성능을 보여주지만, 어떤 변형들이 가해진 것인지 전혀 알 수 없는 임의의 디지털사진을 분석해야 하는 실제 상황에서는 판독의 정확성과 신뢰도가 크게 떨어질 수 밖에 없다.
다양한 변형이 가해진 채 온라인에서 유통되는 사진이나 영상에 대한 변형 여부의 탐지는 극소수 전문가들의 주관적인 판단의 영역에 머물러 왔기 때문에 이런 문제해결을 위해 많은 도전적 연구들이 진행되고 있다.
이흥규 교수 연구팀이 개발한 이 기술은 국내 최초이자 세계 두 번째로 거둔 쾌거이다. 연구팀은 일반인들을 대상으로 2015년 6월부터 `디지털 이미지 위·변조 식별 웹서비스'를 통해 수집한 30여만 장의 실 유통 이미지 데이터와 특징기반·신경망 기반의 포렌식 영상 데이터, 딥페이크와 스테고 분석을 위한 대량의 실험 영상자료를 정밀 분석해 활용한 연구 결과물이다.
이 교수팀은 특정 변형을 탐지하는 개개의 알고리즘들을 모아놓은 기존 기술의 한계를 극복하고, 다양한 변형에 대한 탐지를 유기적으로 통합하는 기술에 주목했다.
이를 위해 잘라 붙이기·복사 붙이기·지우기·이미지 내 물체 크기 변화와 이동·리터칭 등 일상적이면서 자주 발생하는 변형들에서 언제나 발생하는 변이들을 분류, 정리해 필수 변이로 정의하고 이들을 종합 탐지하는 연구를 수행했다. 그 결과 변형의 유형을 특정하지 못하는 상태에서도 변형이 발생했는지 여부를 판단함으로써 탐지 신뢰도를 크게 높였다.
연구팀은 이어 BMP·TIF·TIFF·PNG 등 무압축, 무손실 압축을 포함해 50여 개의 표준 양자화 테이블과 1,000여 개가 넘는 비표준화된 양자화 테이블에 기반한 JPEG 이미지들도 포괄적으로 처리하는 기술을 포함한 실용 소프트웨어를 개발하는 데 성공했다.
이 교수팀이 개발한 `카이캐치'는 전통적인 영상 포렌식 기술, 스테그 분석 기술 등 픽셀 단위의 미세한 변화를 탐지하는 기술들을 응용해, `이상 영역 추정 엔진'과 `이상 유형 분석 엔진' 두 개의 인공지능 엔진으로 구성됐으며 이를 기반으로 결과를 판단하고 사진에 대한 다양한 변형 탐지 기능과 사진의 변형 영역 추정 기능 등을 함께 제공한다.
이흥규 교수는 "다양한 변형 시 공통으로 발생하는 픽셀 수준에서의 변형 탐지와 인공지능 기술을 융합한 영상 포렌식 기술을 카이캐치에 담았는데 이 기술은 특히 임의의 환경에서 주어진 디지털사진의 변형 여부를 판단하는데 탁월한 성능을 보인다ˮ고 말했다.
이 교수는 이어 "향후 각종 편집 도구들의 고급 기능들에 대한 광범위한 탐지 기능을 추가하는 한편 현재 확보한 실험실 수준의 딥페이크 탐지 엔진과 일반 비디오 변형 탐지 엔진들도 실용화 수준으로 발전시켜 카이캐치에 탑재하겠다ˮ 고 덧붙였다.
한편 이번 연구는 우리 대학 창업기업인 ㈜디지탈이노텍(http://www.kaicatch.com/) 과 산학협력 연구로 수행됐다.
2020.11.04
조회수 24685
-
적외선 세기·위상 제어 가능한 메타표면 개발
우리 대학 전기및전자공학부 장민석 교수와 미국 위스콘신 대학 브라(Victor Brar) 교수 연구팀이 적외선의 세기와 위상을 독립적으로 제어하는 동시에 전기 신호로 광학적 특성을 조절할 수 있는 그래핀 기반 메타 표면을 이론적으로 제안했다.
이번 연구를 통해 기존 능동 메타 표면 분야의 난제였던 빛의 세기와 위상의 독립적 제어 문제를 해결해 중적외선 파면을 더 정확히 고해상도로 변조할 수 있을 것으로 기대된다.
한상준 석사과정과 위스콘신 대학교 김세윤 박사가 공동 1 저자로 참여한 이번 연구는 국제 학술지 ‘ACS 나노(ACS Nano)’ 1월 28일 자 전면 표지논문으로 게재됐다. (논문명 : Complete complex amplitude modulation with electronically tunable graphene plasmonic metamolecules)
광변조기술은 홀로그래피, 고해상도 이미징, 광통신 등 차세대 광학 소자 개발에 필수적인 기반 기술이다. 기존 광변조기술에는 액정을 이용한 방식과 미세전자기계시스템(MEMS)을 이용한 방식이 있다. 그러나 두 방식 모두 단위 픽셀의 크기가 회절 한계보다 크고, 구동 속도에 제한이 있다는 문제가 있었다.
메타표면은 이러한 문제들을 해결할 수 있기에 차세대 광변조기술의 강력한 후보이다. 메타표면은 자연계의 물질이 가질 수 없는 광학적 특성을 가지며, 회절 한계를 극복한 고해상도의 상을 맺는 등 전통적인 광학 시스템의 한계를 극복할 수 있다는 장점이 있다. 특히, 능동 메타표면은 전기 신호로 그 광학적 특성을 실시간 제어할 수 있어 적용 범위가 넓은 기술로 평가받고 있다.
그러나 기존에 연구되던 능동 메타표면은 빛의 세기 조절과 위상 조절 간의 불가피한 상관관계 문제가 있다. 기존 메타표면들은 개별 메타 원자가 하나의 공진 조건만을 가지도록 설계됐으나, 단일 공진 설계는 빛의 진폭과 위상을 독립적으로 제어하기에는 자유도가 부족하다는 한계점이 있다.
연구팀은 두 개의 독립적으로 제어 가능한 메타 원자를 조합해 단위체를 구성함으로써 기존 능동 메타표면의 제한적 변조 범위를 획기적으로 개선했다.
연구팀이 제안한 메타표면은 중적외선의 세기와 위상을 독립적으로 회절 한계 이하의 해상도로 조절할 수 있어 광 파면의 완전한 제어가 가능하다.
연구팀은 제안된 능동 메타표면의 성능과 이러한 설계 방식을 응용한 파면 제어의 가능성을 이론적으로 확인했다. 특히, 복잡한 전자기 시뮬레이션이 아닌 해석적 방법으로 메타표면의 광학적 특성을 예측할 수 있는 이론적 기법을 개발해 직관적, 포괄적으로 적용 가능한 메타표면의 설계 지침을 제시했다.
연구팀의 기술은 기존 파면 제어 기술 대비 월등히 높은 공간 해상도로 정확한 파면 제어가 가능할 것으로 기대된다. 이 기술을 기반으로 향후 적외선 홀로그래피, 라이다(LiDAR)에 적용 가능한 고속 빔 조향 장치, 초점 가변 적외선 렌즈 등의 능동 광학 시스템에 적용 가능할 것으로 보인다.
장민석 교수는 “이번 연구를 통해 기존 광변조기 기술의 난제인 빛의 세기와 위상의 독립제어가 가능함을 증명했다”라며 “앞으로 복소 파면 제어를 활용한 차세대 광학 소자 개발이 더욱 활발해질 것으로 예상된다”라고 말했다.
2020.02.18
조회수 13602
-
조광현 교수, 뇌파 생성, 변조 담당하는 신경회로 원리 규명
〈 조광현 교수 연구팀 〉
우리 대학 바이오및뇌공학과 조광현 교수 연구팀이 뇌파의 생성 및 변조를 담당하는 핵심 신경회로를 규명하는 데 성공했다.
이를 통해 뇌의 동작원리를 밝힐 뿐 아니라 향후 여러 뇌질환 환자에게서 발생하는 비정상적 뇌파활동을 신경세포 네트워크 수준에서 규명하는 데 활용 가능할 것으로 기대된다. 이번 연구는 4차 산업혁명의 핵심기술로 주목받는 IT와 BT의 융합연구인 시스템생물학 연구로 규명했다는 의미를 갖는다.
이병욱 박사과정, 신동관 박사, 스티븐 그로스 박사가 함께 참여한 이번 연구는 국제 학술지 ‘셀 리포트(Cell Reports)’ 11월 6일자 온라인 판에 게재됐다.
뇌의 다양한 기능은 신경세포(뉴런) 사이의 복잡한 상호작용을 통해 이뤄진다. 특히 뉴런들의 동시다발적인 발화에 의해 형성되는 뇌파는 뇌의 활동 상태를 측정하는 가장 중요한 지표이며, 특정 기능을 수행하기 위해 영역 간 선택적 통신의 매개체 역할을 하는 것으로 알려져 있다.
또한 뇌파의 비정상적인 생성 및 변조 현상은 다양한 뇌질환과 밀접한 관계를 갖는 것으로 밝혀지고 있다. 이에 따라 전 세계 신경생물학 연구자들은 뇌파의 생성 및 변조 원리를 파악하기 위해 노력해 왔다.
그러나 뇌파의 생성 및 변조는 수많은 뉴런 사이의 복잡한 상호작용을 통해 발생하는 예측할 수 없는 창발적 특성(emergent property)을 갖기 때문에 기존의 신경 생물학 실험을 통해 그 원리를 규명하기에는 한계가 있었다.
조 교수 연구팀은 시스템생물학 기반의 연구방법을 통해 뇌파의 생성 및 변조 원리를 분석했다. 연구팀은 여러 뇌 영역 중 특히 감각 피질(sensory cortex)에 주목했다. 감각 피질은 외부 감각 정보를 처리하고 통합, 조절하는 핵심 영역으로 여러 주파수 대역의 뇌파와 변조를 관측할 수 있다.
연구팀은 최근 커넥토믹스 (connectomics) 연구를 통해 밝혀진 쥐의 감각피질 내 뉴런의 종류 및 뉴런 간 연결성 정보를 이용해 감각피질을 구성하는 뉴런들과 이들을 연결하는 시냅스를 수학 모델을 통해 표현하고 이로부터 신경회로를 구축해 뇌파의 생성 및 변조 과정을 분석했다.
연구팀은 대규모 컴퓨터 시뮬레이션 분석을 통해 흥분성 뉴런과 억제성 뉴런으로 구성된 양성피드백과 음성피드백의 중첩된 구조(interlinked positive and negative feedback)가 뇌파의 생성 및 주파수 변조 현상의 핵심회로임을 최초로 규명했다.
특히 연구팀은 기존의 전기생리학 실험을 통해 측정된 뉴런 간 시냅스의 특정 연결강도가 신경회로의 뇌파 생성 및 변조 기능을 극대화시킬 수 있는 최적의 조합임을 밝혀냈다.
이번에 개발한 수학모형을 활용하면 전통적 생물학 실험을 통해 파악이 어려웠던 뉴런들 간의 다양한 상호작용을 이해하고 신경회로의 복잡한 설계원리를 파악할 수 있을 것으로 기대된다.
또한 여러 뇌질환 환자의 뇌에서 관측되는 비정상적인 뇌파 활동을 신경네트워크 차원에서 분석하고 규명할 수 있을 것으로 예상된다.
시스템생물학 접근을 통한 신경회로의 구조 및 기능 분석은 인공지능의 발전에도 기여할 것으로 기대된다. 두뇌 신경회로의 작동원리에 대한 이해를 높인다면 컴퓨터 과학자들이 이를 이용해 새로운 인공지능 기술을 개발할 수 있다. 자폐증이나 집중력 조절장애 등과 관련된 신경회로 규명, 두뇌 치료 기술 개발 등의 원천 의료기술 개발에도 혁신으로 이어질 수 있다.
조 교수는 “지금껏 뇌파의 생성 및 변조를 담당하는 핵심 신경회로가 밝혀진 바가 없었다”며 “이번 연구에서는 최근 커넥토믹스 (connectomcis) 연구를 통해 점차 밝혀지고 있는 뉴런간의 복잡한 연결성에 숨겨진 설계원리를 시스템생물학 연구를 통해 찾아냄으로써 뇌의 동작원리를 파악할 수 있는 새로운 가능성을 제시했다”고 말했다.
이번 연구는 과학기술정보통신부와 한국연구재단의 중견연구자지원사업과 바이오의료기술개발사업, 그리고 삼성전자 미래기술육성센터의 지원을 받아 수행됐다.
□ 그림 설명
그림1. 뉴런 간 연결 강도에 내제된 기능적 설계원리 파악
그림2. 뇌파의 생성 및 변조를 담당하는 핵심 신경회로
2018.11.14
조회수 16448
-
디지털 이미지 위조, 변조 식별 기술 개발
이 흥 규 교수
우리 대학 전산학부 이흥규 교수 연구팀이 육안으로 판단이 어려운 디지털 이미지의 위조 및 변조를 식별할 수 있는 웹 서비스를 개발했다.
이 서비스는 국내에서 처음 시행되는 디지털 이미지 조작탐지 웹 서비스이며, 11일부터 http://forensic.kaist.ac.kr 도메인을 통해 시범 운영된다.
이번 연구는 이미지의 무결성 확인이 필요한 법원, 의료, 군사 등 다양한 분야에서 활용될 전망이다. 논문 사진, 의료 영상, 법적 증거자료 등에서 조작으로 인해 발생할 사회적 문제를 예방할 수 있을 것으로 기대된다.
기존의 이미지 조작 식별 서비스는 포맷 기반의 조작 탐지 방식에 근거해 위조 가능성 여부만을 알 수 있는 수준이었다. 포토샵 등 이미지 수정 프로그램의 다양한 수정 방식을 현재의 탐지 기술로 모두 잡아내기엔 어려움이 있었다.
연구팀은 국제 저명 논문 및 연구 결과들을 기반으로 해당 서비스를 구축했다. 복사-붙여넣기, 리터칭, 전체 변형, 스플라이싱 등 다양한 조작 방식을 식별하기 위해 탐지 방식 역시 여러 방향으로 구축했다.
연구팀은 ▲이미지 픽셀의 통계적 특성의 변화를 탐지하는 픽셀 기반 방식▲이미지 손실 압축 기업에 의한 무결성 검증을 통한 포맷 기반 방식▲카메라의 촬영 프로세스가 남기는 특성에 기반한 카메라 기반 방식을 이용해 조작을 탐지했다.
디지털 이미지에 가해지는 변형은 눈에 보이지 않아도 이미지 내부의 통계적 특성을 변화시킨다. 또한 변형의 종류에 따라 통계적 특성이 다르게 나타나는데 위의 방식들을 통해 조작의 영역 및 방식까지 측정이 가능해진다.
이번 웹 서비스는 논문 발표 수준에서만 진행되던 기술들을 다년간의 연구개발을 통해 일반에 제공함으로써 상용화의 발판이 될 것으로 기대된다. 연구팀은 개발된 기술 중 상당수는 이미 상용화 가능한 수준의 탐지율 및 기술 신뢰도를 보인다고 말했다.
이흥규 교수는 “전문 이미지 편집 툴의 발전에 비해 위변조 탐지 기술은 그 중요도에 비해 관심과 연구가 많이 부족하다”며 “다양한 위, 변조 탐지의 과학적 기법들이 실용화가 가능하도록 연구하겠다”고 말했다.
이번 연구는 미래창조과학부와 한국연구재단이 추진하는 중견연구자지원사업의 지원으로 수행됐다.
□ 사진 설명
그림 1. 2008년 이란의 미사일 발사 사진 조작 탐지 결과(복사-붙여넣기)
(左 : 원본, 中 : 이란에서 발표한 조작 사진, 右 : 연구팀이 탐지한 조작 영역이 픽셀로 표시된 화면)
그림 2. 탐지 기법 중 ‘색상 변환 탐지 기법’에 의해서 탐지된 결과 (左 : 원본, 中 : 색상 변형 조작 사진 右 : 조작 영역이 색깔로 표시된 화면)
그림 3. 복사-붙여넣기한 사진 조작 탐지 결과 (左 : 원본, 中 : 조작 사진, 右 : 조작 영역이 표시된 화면)
2015.06.11
조회수 14322