🔎 #760. 한국어 릴스, 영어 더빙하기(ElevenLabs Dubbing v2)

안녕하세요?
매일 사람이 쓰는 뉴스레터 Daily Prompt입니다.

오늘은 ElevenLabs Dubbing v2로 한국어 릴스, 영어 더빙하는 법을 다룹니다.

한국어 릴스, 영어 더빙하기

ElevenLabs가 2026년 5월 28일 Dubbing v2를 공개했습니다. ElevenLabs 발표에 따르면:

• 이제 처음으로, 원본 화자의 감정과 연기가 모든 언어로 자연스럽게 전달됩니다.
• 기존 방식은 대본만으로 평면적이고 단절된 오디오가 만들어지는 경우가 있었지만, Dubbing v2는 원본 연기에 직접 기반한다고 합니다.
• 원래 사람이 말한 것처럼 느껴지도록, 톤, 속도, 전달 방식, 감정을 함께 전달합니다.
• AI 더빙의 가장 큰 미해결 과제 중 하나였던, '번역된 음성이 실제 원화자가 말한 것처럼 느껴지게 만드는 문제'를 해결합니다.

소식을 듣고 직접 사용해보았습니다. Elevenlabs에 접속한 뒤, 왼쪽 메뉴에서 'Dubbing'을 선택합니다. 그런 다음 영상파일을 업로드하고 더빙할 언어를 설정합니다.

저는 인스타그램에 업로드된 한국어 릴스 영상을 업로드하였습니다.

잠시 뒤, 영어로 더빙된 영상이 만들어집니다. 다운로드 버튼(아래 붉은색 박스 표시)을 클릭하여 내려받습니다.

영상 더빙 결과:
입술은 맞지 않지만 싱크나 오디오 길이는 대부분 맞춰졌습니다.

무료로 시작할 수 있는 사용량

무료 플랜이더라도 1분 길이의 영상에 한해 더빙 영상을 제작해볼 수 있어, 궁금하신 구독자님은 한 번 사용해보세요 :)

• 무료 플랜: 1분
• Starter 플랜(유료): 15분
• Creator+ 플랜(유료): 30분

마무리

1. 직접 더빙 영상을 만들어보니, 제 목소리와 유사하면서도, 다른 언어로 전달된다는 점이 좋았습니다. 원본 콘텐츠의 말 흐름과 싱크를 최대한 유지하려는 점도 장점으로 느껴졌고, 번역된 문장 역시 자연스러웠습니다.
2. 오늘 소개드린 더빙 기능은 특히 크리에이터에게 유용하게 쓰일 수 있을 것 같습니다. 릴스처럼 짧은 영상은 물론, 강의나 인터뷰처럼 크리에이터를 오랜시간 보여줄 수 있는, 롱폼 콘텐츠에도 적용해볼 만합니다. (다만 이 때는 유료구독을 해야하지만요)
3. 최근 유튜브의 자동 자막도 점점 좋아지고 있다고 느끼는데, 이제는 더빙 기술까지 함께 발전하고 있습니다. 좋은 콘텐츠가 여러 언어로 전달되면서 콘텐츠의 국경은 점점 낮아지고 있습니다. 개인이 만든 콘텐츠도 더 넓은 세계에서 발견되고 인정받을 수 있는 길이 열리고 있습니다.
4. 그렇기 때문에 이제는 좋은 콘텐츠를 만들 수 있는 역량을 키우는 일이 더 중요해집니다. 개인이 만든 콘텐츠도 세계적으로 발견될 수 있다면, 결국 차이를 만드는 것은 콘텐츠 안에 담긴 관점과 밀도입니다. 이를 위해서는 자신만의 데이터, 즉 자신만의 인사이트가 필요합니다. 그리고 그 인사이트는 좋은 인풋에서 나옵니다. 시간이 걸리는 일이기 때문에 단기간의 성과에 집중하기 쉽지만, 이 본질을 놓치지 않았으면 좋겠습니다.

오늘의 Midjourney Prompt & Music

아래 Midjourney 이미지를 음악과 함께 감상해보세요:)

Extraction

0:00

/0

1×

프롬프트 (by @jae_hong__an) :