일레븐랩스, 영상만 올리면 배경음악과 효과음을 자동 생성·배치하는 'Instant Soundtracks' 출시

일레븐랩스가 영상에 맞춰 음악과 효과음을 자동으로 만들어 주는 기능을 출시했어요.

일레븐랩스가 자사 크리에이티브 플랫폼 ElevenCreative에 'Instant Soundtracks' 기능을 추가했어요. 영상을 업로드하면 AI 모델이 영상에 어울리는 오리지널 배경음악을 작곡하고, 동시에 화면을 분석해 효과음이 필요한 순간을 찾아 그 타이밍에 맞는 효과음을 생성해 줘요. 만들어진 효과음은 타임라인에 자동으로 배치되는데, 예를 들어 광고 마지막에 로고가 등장할 때 '휙' 하는 소리를 정확히 맞춰 넣는 식이에요.

이번 업데이트로 숏폼 영상의 컷 전환과 화면 속 동작에 맞춘 타이밍이 더 정교해졌고, 장면마다 음악 분위기를 바꾸는 것도 자연스러워졌대요. 빠른 장면에서는 EDM이나 R&B가 흐르다가 잔잔한 장면에서는 어쿠스틱 기타로 넘어가는 식이죠. 영상에 원래 있던 오디오를 참고 자료로 넣으면 장르와 BPM, 악기 구성을 분석해 비슷한 성격의 새 음악을 만들어 주기도 해요. 효과음은 음악과 별도 레이어로 나와서 편집기에서 따로 타이밍을 조정하거나 음악만 바꿀 수 있어요.

기능은 ElevenCreative와 ElevenMusic, API로 바로 쓸 수 있고, API에서 트랙 분리 옵션을 켜면 음악과 효과음을 따로 담은 ZIP 파일을 받을 수 있어요. 게임 트레일러나 숏폼 홍보 영상의 사운드 초안을 빠르게 잡는 데 유용해 보여요.

원문: ElevenLabs Blog