Dellows News

ElevenLabs、動画に合わせ音楽と効果音を同時生成する新機能を提供開始

米国ニューヨーク州に本社を置くElevenLabs(CEO:Mati Staniszewski、以下イレブンラボ)は、2026年10月15日、アップロードした動画に合わせてオリジナルの音楽と効果音を一度に生成する新機能「Instant Soundtracks」の提供を開始した。本機能は『ElevenCreative』『ElevenMusic』『ElevenAPI』で利用できる。動画内容の解析を通じて、シーンに合わせた音楽の生成やタイムスタンプに応じた効果音の付与が可能となる。

動画解析とシーンに合わせた音楽・効果音の同時生成

「Instant Soundtracks」は、アップロードされた動画を解析し、その内容に合わせたオリジナルの音楽を生成する。同時に効果音が必要な場面を検出し、各シーンのタイムスタンプに合わせて効果音を生成する仕組みを備えている。SNS向けのショート動画やYouTube、商品紹介動画、イベントの告知映像などに適した効果音を付与できる。

ショート動画のテンポに合わせて音楽のタイミングが改善されたほか、シーンの雰囲気に合わせたムードの切り替えにも対応する。テンポの速いシーンではEDMやR&B、ゆったりとした親密なシーンではアコースティックギターに切り替わる。さらに、動画内の元の音楽が持つジャンル、BPM、楽器構成などを参照し、そのキャラクターに合わせた音楽を生成することも可能となっている。

編集機能と商用利用への対応

『ElevenCreative』のMusic Video Editorでは、効果音が音楽とは別のレイヤーとして表示されるため、個別の確認や調整が行える。効果音の追加やタイミングの調整、音楽の差し替えに対応し、編集後はそのまま書き出すことができる。

生成された音楽と効果音は商用利用が可能とされている。イレブンラボの音楽生成モデルは、権利者とのライセンス契約に基づいて開発されている。

提供サービスとAPI仕様

2026年10月15日より、以下の各サービスで利用可能となっている。

  • 『ElevenCreative』:Music Video Editor(音楽タブ)、および広告に音楽と効果音を追加するCreative Engine
  • 『ElevenMusic』:ElevenMusicのプラットフォーム
  • 『ElevenAPI』:Video to Music API。新パラメータ add_sfx、separate_tracks、use_audio_as_reference に対応。separate_tracks=true を指定することで、音楽と効果音を別ファイルとしてZIPで受け取り、後工程でミックスできる。1回のリクエストで最大10本の動画を処理できる。

詳細情報は以下のURLで公開されている。

  • 『ElevenCreative』:https://elevenlabs.io/creative/music
  • Video to Music API ドキュメント:https://elevenlabs.io/docs/api-reference/music/video-to-music

2022年に設立されたイレブンラボは、AI研究およびプロダクトを手がける企業である。企業向けの音声・チャットエージェントプラットフォーム「ElevenAgents」、コンテンツの制作・編集を支援する「ElevenCreative」、開発者がAIオーディオ基盤モデルを利用できる「ElevenAPI」を提供している。音声合成、音声認識、会話型AIなどを通じ、企業、開発者、クリエイターによるコミュニケーション体験の構築を支援している。現在の企業評価額は220億米ドルを超え、Fortune 500企業の80%以上を含む数千社に利用されている。

  • 日本語サイト:https://elevenlabs.io/ja 
  • LinkedIn:https://www.linkedin.com/company/elevenlabs-japan/
  • イレブンラボ 日本語版X(旧Twitter):@ElevenlabsJapan
  • イレブンラボジャパン公式note:https://note.com/elevenlabs_japan

本記事はElevenLabsの発表をもとに作成されています。

アクセスランキング

今日

1週間