글로벌 AI 오디오 기업 일레븐랩스(ElevenLabs)가 업로드한 영상에 맞춰 오리지널 음악과 효과음을 함께 생성하는 '인스턴트 사운드트랙(Instant Soundtracks)'을 선보였다고 밝혔다. 이 기능은 일레븐크리에이티브(ElevenCreative), 일레븐뮤직(ElevenMusic), 일레븐API(ElevenAPI)에서 이용할 수 있다.
일레븐랩스에 따르면 인스턴트 사운드트랙은 영상을 분석해 장면에 어울리는 음악을 만들고, 효과음이 필요한 구간을 감지해 각 장면의 타임스탬프에 맞춰 사운드를 생성한다. 광고 마지막 로고 장면처럼 특정 포인트에 맞춘 효과음도 넣을 수 있다. 숏폼 영상의 템포를 반영하고, 장면 분위기에 따라 음악 무드를 바꾸는 기능도 포함됐다. 기존 오디오의 장르, BPM, 악기 구성 등을 참고해 음악을 만드는 방식도 지원한다.
업계에서는 영상 제작 과정에서 음악과 효과음을 따로 맞추는 수고를 줄일 수 있다는 점에 주목할 만하다고 본다. 다만 생성형 AI 오디오 도구가 늘어나는 만큼, 실제 제작 현장에서는 결과물의 일관성과 편집 편의성이 경쟁력을 가를 변수로 보인다.
일레븐크리에이티브의 뮤직 비디오 에디터에서는 효과음이 음악과 별도 레이어로 표시돼 각각 확인하고 조정할 수 있다. 효과음 추가, 타이밍 조정, 음악 교체도 가능하며 완성 후 바로 내보낼 수 있다. 일레븐크리에이티브 스튜디오 API의 Video to Music API에서는 add_sfx, separate_tracks, use_audio_as_reference 파라미터를 지원하고, separate_tracks=true로 설정하면 음악과 효과음을 별도 파일로 ZIP에 담아 후속 작업에서 믹싱할 수 있다. 한 번의 요청으로 최대 10개의 영상을 처리할 수 있다.
· · · · · · · · · ·
관련기사
▶ 일레븐랩스, 대화형 에이전트 구축 기능 ‘아키텍트’ 알파 공개
▶ 10월 24일 어린이대공원 비스타광장, 세계 음악·문화 무료 체험
▶ 엔백스·믹스룸, AI DAW로 K-POP 음악 만드는 교육 환경 만든다
· · · · · · · · · ·
스페셜타임스는 AI 기술의 도움을 받아 더 빠르고 다양한 뉴스를 독자에게 전달하기 위해 노력하고 있습니다.