跳到正文
IFAI

AI工具

Krea AI 上線 3D 轉換:一張平面圖轉成 3D 模型,還能在場景裡實時轉動

首次發布 傳播指數 52

Krea AI 推出 3D 物體轉換功能。使用者把 2D 圖片拖進即時畫布就能右鍵轉成 3D 資產,任意縮放和旋轉角度,右側預覽即時更新。官方稱結合模型微調還能做多圖角色一致性。不過具體技術細節暫未公開。

Krea AI 上線 3D 轉換:一張平面圖轉成 3D 模型,還能在場景裡實時轉動
圖:x.com

在 AI 生圖裡,最讓人頭疼的事莫過於換視角。你抽到了一張近乎完美的人物或道具,想要它側過身一點,結果重新生成出來的完全是另一個人。

創意工具平臺 Krea AI 最近上線了一個很有意思的新功能,直接把普通的 2D 圖片即時轉成 3D 物體,讓你在畫布上像玩積木一樣自由旋轉和擺放。

像擺積木一樣控制畫面

這項功能被放進了 Krea 的即時生成工作流裡。操作邏輯很簡單,在網站的 Generate 選單下選擇 Realtime,把任意一張 2D 圖片拖到左側的繪圖區,右鍵點選選擇 Convert to 3D 即可。

轉換完成後,刪掉原本的 2D 底圖,你就得到了一個獨立的三維物件。你可以在畫布上隨意縮放、調整旋轉角度,而右側的預覽視窗會即時渲染出新視角融入場景後的畫面。

如果想要保持多張圖裡的角色一致性,Krea 官方給出的建議是先用 Krea Train 微調一個 Flux 模型,再配合現在的即時 3D 操控來構圖。

油管博主 Olivio Sarikas 已經發布了上手影片,演示了整個實操過程。除了轉 3D,Krea 的平臺目前還堆了不少實用功能,比如即時畫風切換、一鍵修改場景環境、鎖定光影色彩,以及生成 120 fps 的慢動作影片等。

悶頭做產品的黑盒玩家

Krea 官方對背後的具體演算法向來嘴很嚴,這次也只在社交媒體上發了簡短演示,完全沒解釋底層是怎麼實現的。

不過從行業技術來看,這屬於新型視角合成(novel view synthesis)的範疇,也就是用單張 2D 圖片腦補出三維空間幾何,再生成全新的觀察角度。

這個方向現在競爭非常激烈,包括 Stability AI、騰訊和輝達的研究團隊,都在加速把單圖轉 3D 的演算法推向實際可用狀態。

為什麼重要

對於視覺創作者、概念設計師和插畫師來說,這個功能極大地降低了控圖的門檻。以前為了換一個透視角度,你要麼去 Blender 裡費勁搭個白模墊底,要麼在提示詞裡碰運氣抽卡。現在把 2D 資產變成可互動的 3D 錨點,構圖和調鏡頭的效率高了太多,而且這是免費開放的,很值得現在就上手試試。

從行業來看,這標誌著 AI 生成工具正在從純粹的文本擴散向混合空間互動轉移。單純靠文本修修補補已經滿足不了專業工作流,把 3D 幾何控制作為中介軟體嵌進 2D 渲染,正成為下一階段生成工具的標配,這會倒逼 Midjourney 和各類開源 WebUI 加快補齊類似的即時互動能力。

我們認為 Krea 的聰明之處在於產品定位非常剋制。它沒有嘗試去取代 Maya 或 Blender 做精細的 3D 網格匯出,而是把 3D 當成了操控 2D 生成的把手,只要在即時畫面裡看著舒服就行。不過這種單圖生成的 3D 物件在大幅度轉動時,背面和盲區難免會產生幾何變形或紋理模糊,想要達到工業級的精準控制,光靠眼前的黑盒轉化顯然還遠遠不夠。

來源 (2)

  1. [1]
    @krea_ai(在新分頁開啟)原文twitter.com
  2. [2]

每日 AI 內容精選