특정 인물의 모습을 사진이나 영상으로 실제와 같이 합성할 수 있는 딥페이크는 인공지능(AI) 기술 발전의 대표적인 사례로 언급된다. 전문가도 진위를 구분하기 어려울 정도로 완벽하게 이미지, 영상을 합성하는 딥페이크.
혹시 딥페이크나 AI로 애니메이션 성우 목소리 등 특정 인물의 목소리만 완벽하게 제작하는 것도 가능할까?
AI, 심슨가족 성우 대체할 수 있다?
글로벌 월간지 와이어드는 컴퓨터 성능 발전과 함께 기존 심슨가족 성우의 음성 데이터로 AI를 훈련한다면, 딥페이크로 심슨가족 캐릭터의 목소리를 재현할 수 있다고 보도했다.
캐나다 AI 연구원 겸 미디어 제작자인 팀 맥스미서스(Tim McSmythurs)는 모든 텍스트를 영어 음성으로 변환하는 AI 모델 제작에 성공했다. 그는 기존의 호머 심슨 목소리와 주파수만 변경하면, 자신의 AI 모델로 얼마든지 호머 심슨의 목소리를 재현할 수 있다고 설명했다.
이후, 여러 음성 모델 생성을 요청하고, 사용 용도에 가장 적합한 음성을 선택하면, 기존의 호머 심슨 성우를 대체해 애니메이션을 제작할 수도 있다.
맥스미서스만 특정 인물의 음성을 따라하는 AI를 제작한 것이 아니다. 영국 스타트업 소난틱(Sonantic)은 광범위하게 감정을 담을 수 있는 AI 음성을 개발했다. 소난틱의 AI 음성은 성우의 도움을 받아 광범위한 데이터 훈련을 기반으로 제작됐다.
다양한 감정 톤이 담긴 여러 대사를 말한 음성 데이터로 몇 시간 동안 훈련하면, 다양한 감정을 담은 특정 인물의 AI 음성을 제작할 수 있다.
소난틱의 창립자 겸 최고기술관리자 존 플린(John Flynn)은 "AI 모델이 다양한 범위의 감정을 따라 할 수 없다면, 처음부터 제대로 된 AI 음성을 만들 수 없다"라며, AI 음성의 감정 반영의 중요성을 강조했다.
애니메이션과 함께 듣는 AI 음성
호주 AI 음성 제작 기업 레플리카 스튜디오스(Replica Studios)의 쉬레야스 니바스(Shreyas Nivas)는 AI 음성 기술이 개선돼, AI의 음성이 더 자연스러워진 것을 언급하며, AI 음성을 콘텐츠 제작에 최대한 활용할 수 있다고 말한다.
이 덕분에 애니메이션 팬은 개인의 프로젝트를 위해 AI 음성과 함께 가장 좋아하는 애니메이션 캐릭터를 이용할 수 있다.
소난틱의 공동 창립자 겸 CEO인 지나 쿼레쉬(Zeena Qureshi)는 현재의 AI 음성 기술은 초기의 컴퓨터 기반 2차원 및 3차원 이미지 제작 과정과 같은 단계에 접어들었다고 말한다.
그는 "AI 음성이 성우의 목소리를 재현한다. 그러나 AI 음성 때문에 성우라는 직업이 완전히 사라지지는 않을 것이다. 대신, 가상으로 애니메이션 제작 과정에 도움을 줄 것이다. 예를 들어, 특정 캐릭터의 성우가 은퇴한다면, AI 음성이 기존 성우를 대신하는 것을 언급할 수 있다"라고 말했다.
[저작권자ⓒ CWN(CHANGE WITH NEWS). 무단전재-재배포 금지]
