인공지능(AI) 서비스 전문 기업 이스트소프트는 영상 속 화자의 음성을 복제하고 입모양까지 생성해 다국어 발화 영상으로 변환해 주는 오토 더빙 서비스 ‘AI 비디오 트랜슬레이터'(AI Video Translator)를 출시했다고 13일 밝혔다.
 
AI 비디오 트랜슬레이터는 언어의 장벽을 뛰어넘는 혁신적인 AI 커뮤니케이션 서비스로 이스트소프트의 AI 휴먼 구독 서비스 페르소닷에이아이(PERSO.ai)의 확장 기능이다. 

페르소닷에이아이 홈페이지에 회원 가입만 하면 누구나 무료로 1분 분량의 더빙 영상을 제작해 볼 수 있다. 

AI 비디오 트랜슬레이터의 혁신성은 화자의 음성과 미세한 어감에 더해 감정선까지 살린다. 또한, 배경 소음과의 조화까지 완벽하게 이뤄 원본 영상에서 제공하는 메시지와 감동을 언어장벽 없이 그대로 경험할 수 있도록 돕는 데 있다.  

시청자는 자막, 음성 더빙 없이 온전히 원본 영상에 집중할 수 있는 시청 환경을, 글로벌 콘텐츠 제작자는 혁신적인 영상 제작 환경을 AI 비디오 트랜슬레이터로 구축할 수 있게 된다.  

AI 비디오 트랜슬레이터는 페르소닷에이아이의 AI 휴먼 영상 생성 기능 'AI 스튜디오'에서 선보였던 고품질의 음성 및 영상 생성 기술에 높은 변역 정확도까지 확보해 글로벌 경쟁사 대비 뛰어난 품질로 영상을 번역한다. 

지원되는 언어는 한국어를 포함해 영어, 스페인어, 프랑스어, 포르투갈어, 중국어, 일본어 등 29가지에 달한다.  

영상을 번역하는 데 걸리는 시간을 혁신적으로 줄여 사용성 또한 향상시켰다. 

일반적인 영상 더빙 작업에 최소 하루 이상의 시간과 수백만원의 비용이 든다 반면 AI 비디오 트렌슬레이터는 불과 수분 만에 1만 원 내외로 입모양까지 더빙에 맞춰 립싱크 영상을 생성해 업무 생산성을 획기적으로 높여준다. 

게다가 유튜브, 틱톡 등에서 생성한 영상 링크 입력만으로도 스크립트 생성과 번역을 지원하는 등 영상 플랫폼과의 연동을 강화하고, 쾌적한 영상 공유 환경을 제공해 활용성을 극대화했다.  

이스트소프트는 AI 비디오 트랜슬레이터가 글로벌 콘텐츠 제작자의 언어 장벽을 효과적으로 해소함과 동시에 다양한 시장을 열어줄 것으로 기대하고 있다.  

정상원 이스트소프트 대표는 "음색과 감정을 보존해 다국어로 변환하는 AI 비디오 트랜슬레이터가 글로벌 콘텐츠 제작 환경에 혁신을 가져올 것"이라며 "앞으로 언어 제약 없는 정보 공유, 크리에이터와 기업의 해외 진출을 AI 비디오 트랜슬레이터로 적극 지원하며 글로벌 소통을 위한 플랫폼으로 역할을 확장해 나갈 것"이라고 말했다.