🔎 #526. 깔깔 웃는 AI 음성 생성하기(Elevenlabs V3)

안녕하세요?
매일 사람이 쓰는 뉴스레터 Daily Prompt입니다.

오늘은 Elevenlabs의 새로운 버전, V3를 다룹니다.

연기하는 AI Voice

​Elevenlabs에 새로운 버전(V3)이 업데이트 되었습니다. 어떻게 읽어야할 지 가이드를 하는 태그를 달아주면, 이를 반영하여 연기하는 음성이 생성됩니다.

Elevenlabs에 회원가입/로그인을 한 뒤, 'Text to Speech'를 클릭합니다.

다음과 같이 Eleven V3 (alpha)를 선택한 뒤, 음성을 선택한 뒤, 스크립트를 입력합니다. 스크립트를 입력한 뒤 가이드를 해줄 태그를 달기 위해 'Enhance' 버튼을 클릭합니다.

Enhance 버튼을 클릭하고 나면 아래와 같이 태그가 자동으로 작성됩니다. 확인한 후 'Generate Speech' 버튼을 클릭하여 음성을 생성합니다.

음성 생성 결과 1: 태그에 적힌대로 한숨을 쉽니다.

Eleven V3 output 1

0:00

/20.11425

1×

이번에는 울면서 애원하는 상황의 대사를 스크립트로 입력해보았습니다.

음성 생성 결과 2: 외국인이 한국어 대사를 하는 느낌으로 생성되었습니다

Eleven V3 output 2

0:00

/5.250563

1×

챗GPT를 사용해 같은 대사를 영문으로 번역하고, 태그도 작성해달라고 요청했습니다.

음성 생성 결과 3:

Eleven V3 output 3

0:00

/12.74775

1×

깔깔 웃으며 말하는 대사도 생성할 수 있습니다.

음성 생성 결과 4:

Eleven V3 output 4 (영어)

0:00

/11.46775

1×

Eleven V3 output 5 (한국어)

0:00

/11.389375

1×

마무리

1. 한국어 연기는 어색: 다국어를 지원한다고 하지만, 아직 어색합니다. 영어 스크립트 결과물이 아직까지 훨씬 좋습니다. 한국어의 경우 여러번 생성해야 하며, 그렇지 않으면 음성 생성 결과 2와 같은 결과를 반복적으로 받게 됩니다.
2. 오디오북 적용 기대: 앞으로 조금 더 기술이 다듬어지고, 오디오북에 적용되었을 때 책을 얼마나 생생하게 읽어줄 지 기대가 됩니다. 라디오 드라마도 가능해지지 않을까요? 동화책을 아예 새롭게 생성하고, 그 생성된 책을 읽는 AI의 등장도 가능하겠네요.
3. 연기를 한다니: 뉴스레터 발행 초반에 '연기는 AI가 따라하기 어렵지 않을까?'라는 생각을 했는데, 너무나 빠른 시간 안에 목소리 연기를 해내고 있습니다. 우는 목소리도, 웃는 목소리도, 대사 없이 한숨 소리도 냅니다. 범죄에 악용이 되었을 때 진짜 사람이 아니라는 걸 어떻게 알아낼 수 있을까요?

오늘의 Midjourney Prompt & Music

아래 Midjourney 이미지를 음악과 함께 감상해보세요:)

Paper Crown

0:00

/168.319979

1×

프롬프트 (by @jae_hong__an) :