유튜브 게임체인저, AI 오토더빙 언제 나오나?

공식 유튜브 컨트리뷰터 / 사이시옷

Feb 16. 2025

※ 유튜브 컨트리뷰터란?

구글이 유튜브 크리에이터들을 도와주는 돕는 인원을 선정하여 더 나은 YouTube 플랫폼을 만드는 데 도움을 줄 수 있도록 만드는 사람들(구글직원이 아닙니다) 구글 전용 워크숍 초청, YouTube팀과 교류, 새로운 제품과 기능의 미리 보기 혜택을 받거나 Google Product Expert(구글 제품전문가) 프로그램에 참여할 수 있는 그룹. 국내 약 20명 내외로 플래티넘 이상의 레벨은 단 5명.

※ 본 작성글은 구글과의 NDA협약(기밀유지 계약)을 위반하지 않은 내용임을 밝힙니다

2025 유튜브 AI 자동 더빙의 기대와 현실

작년 이맘때, 유튜브는 2025년에 AI 기반의 새로운 기능이 등장할 것이라고 발표했습니다. 그중에서도 크리에이터와 시청자 모두가 주목했던 기능이 바로 AI 자동 더빙이었습니다. 최근 이 기능에 대한 최신 업데이트가 청사진이 공개되었으며, 변화된 사항과 크리에이터들에게 미칠 영향에 대한 논의가 활발히 이루어지고 있습니다.

AI 자동 더빙이란?

AI 자동 더빙 기능은 크리에이터가 업로드한 영상을 AI가 자동으로 번역하여 다양한 언어로 더빙해 주는 기술입니다. 기존의 자동 자막과 달리 실제 음성을 사용하여 구현되므로, 시청자들은 더욱 자연스러운 경험을 할 수 있습니다.

대표적인 사례로는 미스터 비스트(MrBeast)의 다국어 채널이 있습니다. 현재 미스터 비스트의 영상은 각국의 성우가 직접 더빙을 담당하고 있지만, AI 자동 더빙 기능이 도입되면 일반적인 크리에이터들도 유사한 경험을 제공할 수 있게 됩니다. 즉, 한국에서 인지도가 낮았던 크리에이터도 해외 시장에서 인기를 얻을 가능성이 커지는 것입니다.

AI 자동 더빙의 개발 배경

AI 자동 더빙 기능은 최근의 기술처럼 보이지만, 사실 구글이 2년 전부터 개발한 '어라우드(Aloud)' 모델을 기반으로 하고 있습니다. 이 모델은 유튜브의 공식 발표에서도 언급되었으며, 시연 영상이 일부 공개되기도 했습니다. 현재까지 확인된 사항은 다음과 같습니다

- 초기 모델은 영어 교육 영상을 스페인어, 인디어, 이탈리아어, 프랑스어 등으로 변환하는 방식으로 테스트됨

- 파일럿 이미지와 시연 영상은 공개되었으나, 실제 더빙된 자료는 많지 않음

구글은 이러한 기능을 비공개로 숨기는 것이 아니라 공식적으로 발표는 하지만, 초기 테스트의 경우 홍보를 적극적으로 하지는 않는다는 점이 특징입니다. 따라서 유튜브 업데이트를 자세히 살펴보지 않으면 이러한 기술이 개발되고 있다는 사실조차 모를 수도 있습니다.

AI 자동 더빙의 기대와 한계

현재까지의 테스트 결과를 바탕으로 몇 가지 핵심 포인트를 짚어볼 수 있습니다.

크리에이터들에게는 기회

- 자동 더빙 기능이 활성화되면, 크리에이터들은 콘텐츠를 전 세계로 확장할 수 있습니다.

- 다국어 지원을 통해 예상치 못한 국가에서 인기를 얻을 가능성이 생깁니다.

- 번역과 성우 비용 절감 효과도 기대할 수 있습니다.

- 시청자들에게는 제한적인 초기 지원

- 초기에 지원되는 언어는 제한적일 가능성이 큽니다.

한국어에서 해외 언어로 변환하는 것은 빠르게 이루어질 가능성이 높지만, 반대로 해외 영상을 한국어로 더빙하는 것은 시간이 더 걸릴 것입니다.

언어별로 자연스러움을 보장하는 수준이 다를 수 있습니다.

언제 출시될까?

작년 발표에서는 2024년 출시를 목표로 한다고 밝혔으나, 최근 발표된 내용을 보면 기능이 점진적으로 확장될 것으로 보입니다. 유튜브 공식 발표로는 "앞으로 몇 달 안에 수십만 명의 크리에이터에게 더빙된 오디오 트랙을 자동으로 추가할 수 있는 기능이 확대될 예정"이라고 합니다.

즉, 올해 안에 모든 크리에이터가 사용할 수 있을 것이라는 보장은 없습니다. 하지만 유튜브가 적극적으로 테스트를 진행 중이므로 조만간 일부 크리에이터들을 대상으로 베타 서비스가 시작될 가능성이 높습니다.

추가적인 AI 기능: 드림트랙(DreamTrack)

유튜브는 자동 더빙 기능 외에도 드림트랙(DreamTrack)이라는 새로운 기능을 준비하고 있습니다. 이 기능은 AI를 활용하여 사용자가 원하는 아티스트의 목소리로 노래를 생성하는 기술입니다.

이는 곧 AI가 특정 아티스트의 목소리를 활용해 노래를 부를 수 있도록 한다는 의미입니다. 만약 이 기술이 활성화된다면, 자동 더빙 기능과 결합하여 특정 배우나 성우의 목소리로 콘텐츠가 제공될 수도 있습니다. 다만, 저작권 문제로 인해 적극적으로 도입되기까지는 시간이 걸릴 것으로 보입니다.