Lightricks 推出音訊轉影片功能:聽懂音樂節拍,用聲音直接生成畫面
Lightricks 推出音訊轉影片功能,允許使用者輸入語音、音樂或音效生成對應影片。模型能理解節奏與節拍,實現畫面與聲音精準卡點,可用來製作音樂影片、素材和數字人。這意味著聲音也能直接充當畫面的分鏡指令碼。

過去剪影片,大家習慣先靠提示詞生成畫面,再去曲庫裡費勁扒拉音樂來卡點。現在 Lightricks 想把這個順序倒過來。
AI 創意平臺 Lightricks 推出了一項音訊轉影片功能,讓聲音直接變成生成畫面的主導者。
讓畫面跟著聲音卡點
使用者可以直接輸入一段語音、音樂或音效,模型會根據音訊內容自動生成匹配的影片。
據 LTX 介紹,該模型能夠理解聲音中的節奏和節拍,從而確保生成的畫面動作在時機上與聲音精準卡點。這項能力可以直接用來製作音樂影片、補全 B-roll 素材,或者生成動作與語調一致的數字人。
為什麼重要
對創作者來說,卡點和對齊口型一直是最花時間的繁瑣工序。現在把音訊作為輸入源,等於讓一段旋律直接充當了分鏡指令碼,大幅降低了短影片和配樂片段的製作門檻。
我們認為,Lightricks 的聰明之處在於沒有繼續在單純的文生影片賽道上硬卷畫質,而是切入剪輯流程裡最痛的音畫同步環節。不過,模型在面對節奏複雜的曲風時能否保持畫面連貫、不出現抽搐,依然需要在實際工作中檢驗。
來源 (1)
- @LTXStudio(在新分頁開啟)原文x.com