跳到正文
IFAI

AIGC

Adobe 推出 MultiFoley:能把貓叫變成獅吼,給影片精準配音效

首次發布 傳播指數 32

Adobe Research 推出多模態影片音效生成技術 MultiFoley。它能識別畫面動作,把打字機聲換成鋼琴聲、讓貓叫變成獅吼,並將現有音效精準對齊影片時間點。這意味著影片擬音製作無需逐幀手動對軌,創意換聲變得極其簡單。

Adobe 推出 MultiFoley:能把貓叫變成獅吼,給影片精準配音效
圖:x.com

影片剪輯裡最折磨人的活兒之一,就是對音效。不僅要費勁到處找素材,還得在時間線上手動逐幀對齊。

Adobe Research 帶來了一項名為 MultiFoley 的新研究。這是一種具備多模態控制能力的影片音效生成方法。

替貓咪配上獅子吼

說白了,它不僅能看懂影片畫面裡的動作,還能讓創作者隨心所欲替換和調整聲音的風格。

根據公開的演示,你可以讓敲打打字機的動作發出鋼琴的聲音,或者讓畫面裡一隻小貓張嘴時發出獅子般的咆哮。

除了這種創意風格遷移,MultiFoley 還能把現有的音效精準對齊到影片的動作時間軸上,省去手動拖動音訊波形對點的繁瑣步驟。

為什麼重要

影視擬音向來是極度耗時的工作。雖然 MultiFoley 目前還是 Adobe Research 的一項研究成果,普通使用者暫時還無法在剪輯軟體裡直接上手,但它展示的方向非常務實。

我們認為,相比很多一鍵生成整段音訊、但根本無法微調的生成式工具,MultiFoley 最聰明的地方在於把控制權交還給了創作者。它不僅能做跨界的聲音趣味替換,還能解決音效對齊這一最現實的痛點。

如果未來這項能力被整合進 Premiere 等剪輯軟體,很可能會徹底重塑影片後期的音效製作流程。

來源 (1)

  1. [1]
    @icreatelife(在新分頁開啟)原文twitter.com

每日 AI 內容精選