🔎 #154. 사람없이 오디오 드라마도 뚝딱

구독자님, 안녕하세요?
매일 1개의 프롬프트를 배달해드리는 Daily Prompt입니다.

오늘은 Meta의 Audio Box Demo 출시 소식을 다룹니다.

Meta, Audio Box Demo 출시

Audio Box는 오디오 생성을 위한 메타의 새로운 기반 연구 모델(new foundation research model)입니다. 음성을 입력하거나 사용자가 텍스트로 프롬프트를 입력하면 음성과 음향 효과(Sound Effect)를 생성할 수 있습니다. 이에 따라 개인별로 맞춤형 오디오를 쉽게 만들 수 있게 되었습니다.

내 음성을 녹음하면 이를 학습하여 내 목소리로 말을 하기도 하고(Your Voice) 학습된 내 목소리의 스타일을 변경할 수도 있습니다(Restyled Voices). 텍스트 프롬프트만으로 새로운 목소리를 생성하고 스크립트를 읽는 것도 가능합니다(Described voices). 목소리 뿐만 아니라 음향 효과(Sound Effects)도 생성할 수 있습니다.  

이뿐만 아니라 녹음된 내 목소리에서 소음을 제거하거나(Magic Eraser), 생성한 음향 효과를 편집하여 전혀 다른 소리를 중간에 삽입하는 것도 가능합니다(Sound Infilling).

Demo지만 결과물이 굉장히 사실적이어서 놀라웠습니다. 생성된 음성과 음향 효과를 활용해  오디오 드라마의 한 장면을 들어볼 수도 있습니다. 링크를 클릭하시면 3가지 시나리오(Tell a knock knock joke, Hear a beach vacation, Fix a rocket engine)를 예제로 만나보실 수 있습니다.

시나리오 선택 후 Play 버튼을 클릭하면 들어보실 수 있습니다. 이제 인간은 목소리만 AI에 제공하고 여러 음향 효과를 생성하기만 하면 한 편의 오디오 드라마를 만들 수 있게 되었습니다.

이번 Audio Box Demo는 교육용으로 발표했다고 합니다. 또한 생성된 모든 파일에는 사람의 귀로는 대부분 구별할 수 없지만 오디오 워터마크가 적용되어 있으며, 워터마크의 여부를 AI 모델에서 검증할 수 있다고 합니다.

오늘의 Midjourney 프롬프트

프롬프트 제공: @jae_hong__an

오늘의 프롬프트: cinematic film still of a beautiful Korean woman with futuristic goggle, steadfastly working the smoldering metallic elements, as she expertly crafts a cutting edge sci-fi weapon, cinematic lighting --ar 2:1 --c 7

오늘의 프롬프트 입력 결과: