대구경북과학기술원(DGIST·총장 국양)은 진경환 전기전자컴퓨터공학과 교수와 이재원 정보통신융합연구소 연구원이 해상도 증대를 위한 '바이큐빅 보간(Bicubic interpolation)' 기술보다 해상력은 높고, 기존 딥러닝 기술 대비 메모리와 속도가 절반 이상 절감된 기술을 개발했다고 22일 밝혔다.
바이큐빅 보간은 디스플레이 기기마다 다른 해상도를 보상하기 위해 개발된 신호처리 기반 기술이다. 메모리가 적게 들고, 속도가 빠르지만, 이미지의 해상도가 저하되는 화질열화 현상이 심하게 나타난다. 이를 극복하기 위해 딥러닝 기반 초고해상도 기술들이 등장했다.
이미지 초고해상도 기술은 디스플레이, 카메라, CCTV 등과 같이 일상생활과 밀접한 관련이 있다. 예를 들어 스마트폰에서는 화면을 확대해야 하는 경우가 많은데 이런 상황에서 기존 바이큐빅 보간보다 뚜렷한 영상을 고해상도화 해야 한다.
하지만 딥러닝 기반 초고해상도 기술은 임의 스케일에 동작하지 못하고, 특정 스케일에서만 동작이 원활하다는 단점이 있다. 최근 이에 대한 해결책으로 함축 표현 신경망 기술이 주목을 받고 있다. 함축 표현 신경망 기술에도 고주파 성분을 잡아내지 못하고, 메모리 크기와 신호의 속도 측면에서 크게 불리하다는 문제점이 있다.
연구팀은 문제를 해결하기 위해 퓨리에 해석 기반 함축 표현 신경망 기술을 개발했다. 이 기술은 이미지의 주파수를 직접적으로 추출하기 때문에, 화질 복원에 있어서 고주파수를 복원하는 데 쉽다. 화질을 높이기 위해서는 고주파수 복원이 필요하므로 CCTV, 디스플레이, 카메라 등과 같은 영상이나 사진 관련 제품들에 필수적인 기술이다.
진경환 교수는 “이번 기술 개발로 짧은 시간 내에 적은 양의 메모리만으로도 임의 스케일에 대한 화질 개선이 이루어질 수 있다. 이로 인해 영상 또는 사진 관련 제품의 알고리즘을 통한 화질 개선, 소프트웨어의 경량화가 이루어질 것으로 기대된다”고 밝혔다.
한국연구재단과 정보통신기획평가원의 지원을 통해 이뤄진 이번 연구성과는 최근 비전 기술 분야 세계적 권위의 국제 콘퍼런스 'IEEE/CVF 2022 Conference on Computer Vision and Pattern Recognition'에 게재됐다.
대구=정재훈기자 jhoon@etnews.com
