유튜브,틱톡,트위터,로컬 동영상파일 | AI 동영상 더빙 번역서비스

유튜브에도 없는 음성 번역기능? 동영상 자동번역 AI

이전에 유튜브 동영상을 번역하는 AI 서비스에대해서 소개해드렸는데 기억하시나요??

 

유튜브만 봐도 매일매일 AI 기술이 얼마나 빠르게 발전하고 있는지 체감할수 있습니다. 매일같이 쏟아지는 기술 속에서, 특히 텍스트에서 음성으로 바꾸는 기능은 유독 눈에 띕니다. elevenlabs 같은 회사는 이 분야에서 정말 이름을 날리고 있죠.

AI챗봇을 제작할때도 elevenlabs의 고급 음성기술을 많이 활용하고 퀄리티있는 챗봇들이 이미 무수히 많습니다.

 

오늘은 elevenlabs의 TTS기능이 아닌 AI 더빙 기능에 대해 좀 더 자세히 이야기해 보려고 합니다. 이 기능은 단순히 글을 음성으로 변환하는 것이 아니라, 기존의 영상을 AI를 통해서 사용자가 원하는 언어로 더빙을 해줍니다. 

 

 

elevenlabs의 AI더빙 서비스

사이트 바로가기(링크) elevenlabs의 더빙 서비스는 로컬에있는 동영상 파일을 업로드하거나 다양한 미디어 플랫폼의 URL주소를 이용하여 별도의 다운로드없이 바로 영상을 번역할수 있다는 강력한 기능이 있습니다.

 

기존에 소개해드렸던 서비스는 영상을 다운받은후 업로드해야한다는 과정이 필요했지만 elevenlabs더빙은 별도의 다운로드 과정을 거치지 않고도 번역할수 있도록 제공하고 있어서 매우 편리합니다.

 

 

유튜브 링크 자동번역

저는 더빙을 테스트하기위해 지오네셔널그래픽의 짧은 영상을 선택하였습니다.(링크)

 

 

AI 더빙은 다양한 플랫폼을 지원하고있으며 upload를 제외하고는 전부 플랫폼의 URL을 입력하기만하면 번역해줍니다.

 

Source Language는 동영상의 원본 언어를 선택해주면 됩니다. 기본값인 Detect로 설정하면 AI가 알아서 원본 영상의 언어를 파악한뒤 번역을 합니다.

 

Target Language는 더빙이될 언어를 선택하면됩니다. 한국어를 선택하였습니다.

 

Youtube URL을 붙여넣은뒤 Dub it!을 선택하면 동영상이 번역됩니다.

 

 

AI 동영상 더빙 결과

원본 영상(링크)의 일부를 AI를 통해 더빙한 결과입니다.

 

유튜브의 자막을 보고도 이해하기 어려운 영어를 한국어로 더빙된 음성으로 들으니깐 확실히 전달력도 높아지고 이해하기 쉬웠습니다.

 

다만 아쉬운점도 존재하였는데 억양을 따라하려고해서 그런건지 모르겠지만 한국어임에도 무슨말인지 잘 안들리는 부분도 분명 존재하였습니다.

이런 부분을 개선할수 있다면 추후에는 더 긴 영상을 더빙해보고 활용범위가 매우 넓을거 같습니다.