Meta 推出 3D 動畫模型 LUNA:不用綁骨骼,幾張照片配草圖就能動
Meta 推出 3D 人體動畫模型 LUNA。它徹底繞開了傳統的骨骼繫結與人體擬合,只需幾張靜態照片,就能靠動作影片、關鍵點甚至手繪草圖直接驅動 3D 高斯形變。製作逼真 3D 人物動畫不必再忍受衣物變形與肢體僵硬。

如果你做過 3D 角色動畫,大概對「綁骨骼」和「刷權重」的折磨深有體會。辛辛苦苦搭好人體模型,只要動作稍微劇烈一點,衣服就會詭異變形,胳膊和關節處常常被扯得像破布一樣。
Meta 團隊釋出了一項名為 LUNA 的全新 3D 人體動畫研究。它的核心思路非常乾脆:既然傳統骨骼繫結毛病這麼多,乾脆把它徹底扔掉。
在 LUNA 這裡,你只需要給它幾張目標人物的日常靜態照片,再塞給它一段驅動動作,它就能直接重建出能跑能跳的逼真 3D 人物。
扔掉傳統骨架,把動作直接畫在 3D 高斯上
以往做單目 3D 人物動畫,幾乎都繞不開線性混合蒙皮(LBS)和引數化人體模型。這套傳統管線很死板,一旦演算法估算的關節位置稍微偏了一點點,渲染出來的畫面就會嚴重抖動,更別提模擬複雜飄逸的衣物了。
LUNA 成了第一個支援隱式 2D 驅動的端到端 3D 動畫模型。它完全不依賴顯式的人體骨架擬合,而是把動作直接對映到 3D 高斯(3D Gaussian)的形變場上。
更讓人驚喜的是它的輸入方式極其隨性。驅動訊號不挑食,可以是一段真人運動影片、一串 2D 關節點序列,甚至可以是一張隨手畫的線條草圖。
在底層架構上,LUNA 採用了一個基於 Transformer 的動作迴歸器。它聰明地把運動拆解為兩部分:一個是管位移和朝向的全域性剛體運動,另一個是管肌肉與衣物褶皺的區域性微動態,從而兼顧了大開大合的肢體動作與精細的表面細節。
既不用骨骼,又怎麼保證人不會變形變扁
完全拋開骨架模型直接從 2D 學 3D 形變,最大的隱患就是空間坍塌。沒有固定的人體結構約束,模型很容易把角色壓扁成一張紙。
為了解決這個問題,研究團隊設計了一套混合監督方案。他們依然找了一個基於傳統 LBS 的模型來當「教師」,但並不直接用它去驅動動作,而是把它作為軟先驗,把基礎的人體空間結構蒸餾給 LUNA。
配合自適應的損失加權機制,LUNA 既能在極少數帶骨架標註的資料上汲取先驗,又能直接吞進海量沒有標註的網際網路日常影片。
這也讓它具備了強大的零樣本跨身份泛化能力。你哪怕拿一張從未見過的角色照片,再配上一段完全不相干的動作影片,它也能把動作順暢地遷移過去。
為什麼重要
我們認為,LUNA 最有價值的地方在於大幅降低了 3D 虛擬人資產的生成與動畫門檻。
對遊戲獨立開發者、影視創作者和數字人從業者來說,傳統動捕和綁骨骼不僅成本高昂,還需要極長的後期修穿模週期。如果未來只需幾張照片和一段參考影片就能生成高保真動效,個人團隊也能批次產出高品質的 3D 互動內容。
在行業層面,這代表了 3D 人體生成正從「物理幾何擬合」走向「端到端神經渲染」。Meta 藉此進一步鞏固了在元宇宙與空間計算底層資產生成上的技術儲備,也給依賴繁瑣骨架管線的傳統圖形工具鏈敲響了警鐘。
不過,目前這項研究還處於論文階段,離工業級管線全面落地還有距離。徹底拋棄骨架雖然換來了靈活性,但在需要毫米級物理碰撞或高精度骨骼約束的遊戲引擎裡,純神經變形依然面臨後期微調難的問題。但無論如何,擺脫骨骼束縛這條路,Meta 看起來走得非常漂亮。
來源 (1)
- arxiv.org(在新分頁開啟)原文arxiv.org