🔎 #288. 영상에서 효과음 생성하기

구독자님, 안녕하세요?
매일 1개의 프롬프트를 배달해드리는 Daily Prompt입니다. 

오늘은 영상에서 효과음을 만드는 법을 다룹니다.

영상에서 효과음 추출하기

지난 276회 뉴스레터에서 Elevenlabs에서 텍스트를 입력하면 효과음을 생성할 수 있다는 내용을 다루었는데요, 오늘은 영상을 업로드해서 효과음을 생성하는 법을 다룹니다.

영상에서 효과음을 추출하려면 아래와 같이 demo 페이지에 접속합니다.

아래 이미지의 빨간 박스 안으로 영상 파일을 드래그하여 업로드합니다.

업로드를 하면 영상을 분석하여 어울리는 효과음을 생성하기 시작하며, 저는 Midjourney+Luma AI 조합으로 만든 영상을 업로드하였습니다.

잠시 뒤 효과음이 생성됩니다. 총 4가지 효과음이 생성되었습니다.

하나를 선택하여 다운로드를 클릭하면, 효과음이 덧입혀진 영상을 받게 됩니다.

마무리

1) 코드가 공개된 GitHub문서에 따르면 데모 페이지는 Elevenlabs의 API와 GPT-4o가 함께 사용되었습니다.

• 비디오에서 1초 간격으로 4개 프레임(이미지)을 추출하고,
• 프레임과 프롬프트를 GPT-4o로 전송하고, GPT-4o가 Text to sound effects 프롬프트를 작성합니다.
• GPT-4o가 만들어준 프롬프트를 사용해 Elevenlabs의 Text to sound effect API로 효과음을 생성합니다.

이와 같은 과정을 통해 Video에서 효과음이 생성된다고 합니다. 

2) 오늘 소개드린 video to sound effect 페이지는 demo 페이지임에 따라 사용자가 몰렸을 때 생성이 잘되지 않을 수 있습니다. Elevenlabs를 이미 적극적으로 사용하고 계신 분이라면 위와 같은 방법으로 ChatGPT에서 이미지를 업로드하여 여기에 어울리는 효과음 프롬프트를 작성해달라고 요청하고, 작성된 프롬프트를 Elevenlabs의 Text to Sound Effect 페이지에 입력하여 효과음을 생성해보셔도 좋을 것 같습니다. 

오늘의 Midjourney 프롬프트

프롬프트 제공: @jae_hong__an

오늘의 프롬프트: A frontal close-up shot of Korean female model in a disco, Bright reflections dance on her face and body, highlighting her elegant dress --ar 16:9 --style raw

프롬프트가 필요하다면

뉴스레터 '데일리 프롬프트'는 2023년 5월에 시작하여, 지금까지 200회가 넘는 뉴스레터를 발행해왔으며, 발행인 소영과 Midjourney 프롬프트를 연재하는 재홍 모두 다음과 같이 책을 출간하였습니다.

발행인 소영이 쓴 책 <데일리 프롬프트 101>은 일상과 업무에서 사용할 수 있는 ChatGPT프롬프를 담았습니다.ChatGPT 사용이 막막한 분께 추천드립니다.
👉 Yes24, 알라딘, 교보문고, 카카오톡 선물하기

'오늘의 Midjourney 프롬프트'를 연재하고 있는 재홍님의 책 <AI Wonderland>는 Midjourney 사용법 및 노하우를 담았습니다.
👉 Yes24, 교보문고, 알라딘, 카카오톡 선물하기

Midjourney 프롬프트를 잘 쓰고 싶다면

생생하고 상세한 설명과 함께 Midjourney 사용법을 배우고 싶다면, 재홍님의 온라인 강의를 추천드립니다:)

* 강의는 다음 내용을 포함할 예정입니다. 자세한 커리큘럼은 여기를 클릭해주시면 됩니다.
  - 17가지 생성형 AI 툴 조합 노하우
  - 활용도 높은 6가지 카테고리+3가지 영상 제작 방법
  - 프롬프트 생성기+AI 활용 가이드북 제공

* 강의 수강 관련 문의: 패스트캠퍼스 고객센터 (링크, 02-501-9396)