Rendora 推出文本生成 3D 影片平臺:輸入文字秒級生成可編輯數字人
Rendora 推出文本生成 3D 影片 Web 平臺。使用者輸入指令碼並挑選角色與場景,數秒即可生成自帶逼真光影與專業運鏡的 3D 數字人影片,並支援手動調整機位。這意味著創作者無需真人出鏡與複雜建模,就能大幅降低製作門檻。

以前想做一個像模像樣的 3D 虛擬人影片,門檻高得嚇人:要麼買昂貴的動捕裝置配專業演員,要麼在複雜的 3D 軟體裡對著關鍵幀熬夜,再等渲染農場慢吞吞出圖。
Rendora 正式把自己的文本生成 3D 影片工具搬上了網頁端(rendora.ai)。在剛結束的計算機圖形學頂會 SIGGRAPH 2024 上,他們帶著這套工具實地演示,現場甚至還能戴著 Apple Vision Pro 體驗沉浸式的 3D 數字人效果。
挑個演員,寫段臺詞就能成片
和目前大多數直接生成不可控 2D 畫素畫面的 AI 影片工具不同,Rendora 走的是完整的 3D 製作管線。
用起來說白了就像在片場排戲:使用者先在庫裡挑選喜歡的數字人角色和場景,貼上寫好的臺詞指令碼,點選生成,幾秒鐘內就能拿到一段完整的 3D 影片。
系統會自動排布機位、計算真實光影,並匹配動作和燈光。更聰明的一點在於,它背後用了自研的大語言模型來驅動文本轉語音和肢體動畫,讓虛擬人的口型、微表情和身體動作都能順著臺詞走,不再像過去那種僵硬的木偶。
更關鍵的是它支援手動編輯。生成的鏡頭如果覺得角度不對,創作者可以直接調整攝像機機位,或者更換角色細節,而不是隻能把整段影片刪掉重新抽卡。
即時渲染與數百萬 3D 資產
根據 Rendora 的介紹,這套系統的底層依靠的是自研生成式 AI、即時渲染引擎,以及一個擁有數百萬現成資產的 3D 資源庫。
創始人 Jim Chai 表示,團隊的目標是讓 3D 內容製作普及化,未來還要延伸到直播和可互動的虛擬人服務。
從指令碼、動畫繫結到機位排程和後期輸出,整個流程都被壓縮到了一個 Web 介面裡。對於營銷推廣、企業內訓或者知識口播這類場景,相當於一個人就包攬了原本需要一整個動畫團隊的活兒。
為什麼重要
我們認為,Rendora 最值得看的地方,在於它沒有盲目跟風 2D 擴散模型的純影片生成路線,而是把 AI 塞進了真正的 3D 空間裡。
現在很多生成式影片最大的痛點就是不可控:畫面看著驚豔,但機位稍微偏一點、光影穿幫或者想換個特定視角,創作者就束手無策,只能一次次重新抽卡拼運氣。而 Rendora 保留了 3D 資產和虛擬相機的邏輯,給創作者留出了精確修圖和調鏡頭的餘地,這才是商業級影片製作真正需要的靈活性。
對中小創作者和企業營銷人員來說,它的價值非常直接。不用請真人出鏡,不用搭綠幕和燈光,幾分鐘就能出一套合格的口播影片,成本和時間都被砍掉了一大截。
不過隱患也同樣明顯。這類依賴預設資產庫的產品,如果角色模版和場景不夠豐富,使用者很容易審美疲勞;而且在沒有真人微表情微調的前提下,數字人能不能徹底避開「恐怖谷效應」,依然需要實際交付效果來驗證。但無論如何,把 3D 生成做成即開即用、可編輯的生產力工具,方向顯然走對了。
來源 (1)
- techtimes.com(在新分頁開啟)原文techtimes.com