跳到正文
IFAI

開源專案

Adobe 開源 TransPixar:直接生成帶透明通道的影片,做特效不用再摳圖

首次發布 傳播指數 47

Adobe 聯合香港科技大學開源影片生成模型 TransPixar。以往 AI 只能生成實底影片,而它能直接輸出帶透明通道的 RGBA 影片,像煙霧、光效等可以直接疊進畫面。目前程式碼和線上 Demo 已公開,但仍在早期階段。

圖:creativebloq.com

TransPixar 是 Adobe Research 聯合香港科技大學開源的影片生成模型,核心能力就一項:直接生成自帶透明通道(Alpha 通道)的 RGBA 影片素材。

如果你平時做後期特效,就知道以前用 AI 生成影片有多折磨。市面上的主流模型只能吐出不透明的實底畫面,哪怕只要一團煙霧,也得自己費勁摳圖,邊緣還經常毛糙發黑,根本沒法直接疊到底軌素材上。

它能做什麼

TransPixar 解決了實底影片難以合成的痛點。它能通過簡單的文本提示詞,直接生成自帶透明背景的動態特效,省去了繁瑣的摳像步驟。

在官方公佈的演示裡,它已經能生成緩慢瀰漫的煙霧團、帶電弧的傳送門,以及旋轉的小行星帶。這些半透明材質和發光邊緣不僅透明度細膩,而且能很自然地融合進背景畫面。

除了文生影片,它還支援把一張普通的靜態圖片動起來,並在上面疊加上自然的半透明動態效果。

怎麼做到的與開源現狀

按照 Adobe Research 專案負責人 Yijun Li 在白皮書裡的說法,Alpha 通道是視覺特效的核心,但由於包含透明通道的 RGBA 影片訓練資料極其稀缺,現有模型很難直接改造。

TransPixar 專門針對半透明材質、精確反射和虛化動態進行了調優,讓模型能夠理解並正確輸出逐幀的 Alpha 通道數值。

目前 Adobe 和港科大已經把專案開源。程式碼已經可以在 GitHub 上獲取,方便開發者自行測試和二次開發;Hugging Face 上也上線了互動式的線上 Demo。

不過需要說明的是,這目前還是一個偏研究性質的早期專案。它還沒有被打包成 After Effects 或者 Cinema 4D 的官方外掛,生成的畫質和解析度距離商業成片標準也還有一段距離。

為什麼重要

對於獨立特效師、遊戲小團隊或者個人創作者來說,TransPixar 值得去 Hugging Face 上先摸一摸。如果它後續能以外掛形式整合進剪輯軟體,製作煙霧、火光、光效這類常見素材的成本會被大幅拉低。

現在的影片生成模型都在卷大場景和宏大敘事,但 Adobe 顯然更懂一線製作人員的真實痛點。從實底畫面走向可直接疊層的 RGBA 資產,才是 AI 工具真正融入專業影視與遊戲工業管線的關鍵一步。

來源 (1)

  1. [1]
    creativebloq.com(在新分頁開啟)原文creativebloq.com

每日 AI 內容精選