阿里公佈 LHM 模型:單張照片幾秒生成可驅動 3D 數字人
阿里巴巴團隊公佈了數字人生成模型 LHM。只要輸入一張單人照片,模型就能在幾秒內以前向推斷方式,直接生成基於 3D 高斯潑濺的高保真可驅動角色,且無需對手部和麵部進行額外後處理,大幅降低了 3D 動畫製作門檻。
Midjourney、Sora、Veo、Suno 等 AI 繪畫、影片、配音和音樂生成工具的新模型、新功能和新玩法。
阿里巴巴團隊公佈了數字人生成模型 LHM。只要輸入一張單人照片,模型就能在幾秒內以前向推斷方式,直接生成基於 3D 高斯潑濺的高保真可驅動角色,且無需對手部和麵部進行額外後處理,大幅降低了 3D 動畫製作門檻。
Pika Labs 預告了一項新影片操控功能。使用者可以單獨修改影片中的任意角色或物體,同時讓其餘畫面保持完全不變。目前該能力尚未公開發布,僅面向申請加入其創意合作伙伴計劃的使用者開放獨家早期體驗。
Captions 推出專為 UGC 風格廣告打造的模型 Mirage。它能根據指令碼或音訊生成帶有肢體動作和微表情的虛擬代言人,並支援自定義服裝、場景與情緒。這意味著無需真人出鏡也能快速批次製作口播帶貨影片。
Freepik 宣佈在其 AI Suite 中接入 Google 影片模型 Veo 2,推出圖生影片功能。創作者生成或修圖後,能直接呼叫 Veo 2 轉成帶動態運鏡的高畫質影片。最值得關注的是影像生成到影片工作流被完全打通;不過該功能僅向 Premium 付費使用者開放。
Hedra 釋出 Character-3 模型與 Hedra Studio 平臺。該模型能同時處理影像、文本和音訊,一步完成口型同步與面部表情動作生成。創作者不再需要分步拼湊多個工具,製作長影片門檻大幅降低。
Amazon 旗下流媒體 Prime Video 宣佈正在測試 AI 輔助配音,首批涵蓋 12 部此前缺乏配音支援的影視內容。該功能支援英語與拉美西班牙語,由 AI 配音結合人類專業人員把控質量,旨在低成本為片庫補齊多語種音軌。
德國電信宣佈與 ElevenLabs 達成戰略合作,將其 Gen FM 技術接入 Magenta AI 應用。使用者能在幾秒內把新聞文章轉成高質量沉浸式播客,或按提示詞定製音訊內容。德國電信同時參投了 ElevenLabs 的 C 輪融資,未來計劃將語音能力擴充套件至更多服務。
Stability AI 宣佈與 Arm 合作,把音訊生成模型 Stable Audio Open 搬上智慧手機。藉助 Arm KleidiAI 最佳化,無需聯網即可在 CPU 上執行,生成 11 秒音訊從 4 分鐘縮至 8 秒內,提速達 30 倍。
OpenAI 宣佈旗下 AI 影片生成工具 Sora 正式進入歐盟和英國市場。這意味著當地使用者現在也可以直接體驗 Sora 的影片生成功能,進一步擴大了該產品的可用地區範圍。
Ideogram 釋出最新影像模型 Ideogram 2a,主打更快速度與高擬真圖文排版生成。最關鍵的是,2a 定價比上一代 2.0 便宜了 50%,並在主站和 API 同步開放。同時官方還推出了免登入即可檢視提示詞的公開 Feeds,進一步降低使用門檻。
Pika 推出 Pika 2.2,支援 10 秒影片生成與 1080p 解析度。新版加入了關鍵幀過渡功能 Pikaframes,允許創作者在 1 至 10 秒內精確控制畫面轉換。目前新功能已上線官網開放體驗。
Mystic 推出 Structure Reference 功能。該工具允許使用者在生成影像時精準控制畫面結構的完整度,支援從卡通到寫實風格的轉換,可用於電影、3D、遊戲及建築設計等多種場景。
Wonder Dynamics 推出 AI 模型 Motion Prediction,專門解決無標記動作捕捉中的遮擋難題。即使演員被障礙物遮擋或身體區域性出畫,模型也能自動補全連貫姿態並減少滑步,已整合至 Wonder Animation。
阿里通義實驗室開源影片生成模型套件 Wan2.1,包含 14B 和 1.3B 兩個版本,在關鍵基準上跑分超過 Sora,生成速度提升 2.5 倍。模型支援影片生音訊與中英雙語文字渲染,輕量版在單張 RTX 4090 顯示卡上 4 分鐘即可生成 5 秒影片。
Luma AI 宣佈為 Dream Machine 推出「影片轉音訊」功能。生成影片後點擊新增的「Audio」按鈕,就能一鍵自動配音,或通過提示詞指定音訊效果。該功能目前處於 Beta 測試階段,面向所有使用者免費開放。
Google 悄悄公開了影片生成模型 Veo 2 的定價頁面。生成影片每秒收費 50 美分,折算下來一分鐘 30 美元、一小時 1800 美元。相比 OpenAI 將 Sora 捆綁在每月 200 美元的 Pro 訂閱中,Google 選擇了直接按秒計費。
Freepik 宣佈與 Google 合作上線影片生成模型 Veo 2。根據 Google 定價頁面,Veo 2 生成影片每秒收費 50 美分,摺合每分鐘 30 美元。該模型支援生成 2 分鐘以上片段,相比 OpenAI Sora 的月費訂閱,按秒計費為創作者提供了新選擇。
AI 影片平臺 Pika 宣佈正式在蘋果 App Store 推出官方 iOS 應用。使用者現在可以直接在手機端體驗影片生成與特效功能,方便生成後直接在移動端釋出和分享。
YouTube 宣佈將 Google DeepMind 的 Veo 2 模型接入 Shorts 的 Dream Screen。創作者不僅能用文字生成背景,還能直接生成插入短影片的獨立片段,對物理規律和人體動作理解更強,並附帶 SynthID 水印。目前已向美、加、澳、紐西蘭開放。
Stable Diffusion 3.5 Large 及 Stable Image Ultra、Core 正式上線 Microsoft Azure AI Foundry 模型目錄。SD3.5 Large 支援文生圖和圖生圖,主打更強的提示詞遵循能力,企業可直接在已有云架構中呼叫部署。