ElevenLabs、動画に合わせて音楽と効果音を自動生成する新機能を提供開始
ElevenLabs は、アップロードされた動画を解析し、オリジナルの音楽と同期した効果音を自動生成・配置する「Instant Soundtracks」を公開した。既存音声を参考にした生成やトラック分離編集にも対応し、短尺動画のシーン転換にも追従する。ElevenCreative や API で利用可能だ。
ElevenLabs は、アップロードされた動画を解析し、オリジナルの音楽と同期した効果音を自動生成・配置する「Instant Soundtracks」を公開した。既存音声を参考にした生成やトラック分離編集にも対応し、短尺動画のシーン転換にも追従する。ElevenCreative や API で利用可能だ。
ElevenLabs は大学生向けプラン「ElevenLabs for Students」を発表した。米英カナダ豪州および EU27 カ国の 18 歳以上の大学生を対象に、ElevenCreative、ElevenAgents、API の 3 カ月無料枠と ElevenReader Ultra 1 年分を提供する。研究やアプリ開発の支援が目的で、順次対象地域を拡大する予定だ。
ElevenLabsはAIネイティブ動画エディタ「Studio 4.0」を発表した。動画、画像、32以上の言語に対応する1万種以上の音声、音楽、効果音の生成を同一タイムライン上で直接実行できる。さらにAI共同編集機能「Studio Agent」を搭載し、映像をフレーム単位で解析して粗編集や音の同期を自動化する。
ElevenLabsは楽曲生成モデル「Music v2」向けに新機能「References」を発表した。10秒から5分の音源をアップロードすることで、スタイルや楽器構成、雰囲気を反映した新曲を生成できる。著作権チェック機構を備え、他アーティストの音源は除外される仕様だ。
ElevenLabs は ElevenCreative で新機能「Avatars」を発表した。音声合成とリップシンク動画生成を同一画面に統合し、画像やプロンプトから同一の人物性を保ったまま動画を制作できる。現在すべての有料プランで利用可能だ。
ElevenLabsはElevenCreativeのタイムライン編集機能「Studio」にAI共同編集ツール「Studio Agent」を追加した。ナレーション、音楽、効果音、映像の編集作業を同一画面内でAIと直接進められるようになり、制作手順を大幅に短縮できる。
ElevenLabsは、テキスト原稿からワンクリックでオーディオブックを制作・配信できる「Audiobooks」を発表した。表現力豊かなAI音声や音声クローンに対応し、シーンごとの細かな演出や効果音の追加が可能。完成した作品はElevenReaderや主要な配信プラットフォームへそのまま一括配信できる。
ElevenLabsは「AI Sound Effects」の近日提供を予告した。テキストプロンプトから独自の音響効果や環境音、サウンドスケープを直接生成できるようになり、音声や音楽に続く制作ツールを提供する。
ElevenLabsは企業向け音声プラットフォームを発表した。対話ボットを構築・監視する「ElevenAgents」と高品質な音声や効果音を生成する「ElevenCreative」の2軸で構成され、SalesforceやZendeskなどの既存業務ツールと即座に連携できる。