CJ올리브네트웍스가 이경옥 무용단의 무용극 '밤의 여왕' 제작에 버추얼 휴먼(Virtual Human) 생성 기술인 인공지능(AI) 보이스 클로닝(Voice Cloning)과 립 제너레이션(Lip Generation) 기술을 제공했다.
AI 보이스 클로닝 기술은 AI 알고리즘으로 개인 음성을 분석, 당사자가 발화한듯 자연스러운 목소리를 자동으로 생성하는 음성합성 기술이다.
개인 음성을 학습시킨 뒤 발화를 원하는 텍스트를 입력하면 원하는 목소리로 텍스트를 읽어주는 음성을 만들 수 있다.
립 제너레이션 기술은 오디오와 영상 속 인물의 입술 발화를 맞추는 AI 기반 립싱크 기술이다. 인물의 영상 또는 이미지와 오디오를 입력하면 오디오 싱크에 맞춰 말하는 듯한 입술의 영상을 생성한다.
CJ올리브네트웍스는 AI 목소리 학습을 위해 배우 손숙과 작업했다. 손숙의 목소리를 학습한 AI는 '밤의 여왕' 주인공이자 복수의 화신인 여왕 캐릭터를 연기하며, 배우 손숙이 현장에서 연기하는 것과 같은 효과를 연출했다.
CJ올리브네트웍스 관계자는 “AI기술을 드라마·예능 등 방송 콘텐츠를 넘어 예술 무대에 적용해 현장 관람객에 선보일 수 있다는 점이 의미가 있다”고 말했다.
송혜영기자 hybrid@etnews.com
