Luma 推出 Dream Machine 指令修改功能:打字就能給影片換裝換場景
Luma Labs 在 Dream Machine 中上線 Modify with Instructions 功能,訂閱使用者直接用自然語言即可修改影片內容。只需在畫面中選定目標並輸入修改提示詞,就能在整段影片中實現物體替換、換裝或虛擬佈景,並支援三檔強度微調。目前已向全部訂閱使用者開放。
Midjourney、Sora、Veo、Suno 等 AI 繪畫、影片、配音和音樂生成工具的新模型、新功能和新玩法。
Luma Labs 在 Dream Machine 中上線 Modify with Instructions 功能,訂閱使用者直接用自然語言即可修改影片內容。只需在畫面中選定目標並輸入修改提示詞,就能在整段影片中實現物體替換、換裝或虛擬佈景,並支援三檔強度微調。目前已向全部訂閱使用者開放。
Ideogram 推出角色一致性工具 Character 及對應 API。只需上傳單張參考圖,就能在不同姿勢、服裝和場景下鎖定五官特徵。最值得關注的是,創作者無需微調即可穩定輸出繪本角色與頭像,開發者也能通過 API 直接呼叫。
Yelp 在 iOS 應用全美上線 AI 生成的餐廳短影片。系統利用 OpenAI 撰寫解說指令碼、ElevenLabs 生成旁白配音並自動拼接使用者的真實圖文。不過商家目前無法提前預覽,普通使用者也暫不能禁止自己的照片被選用。
Meshy.ai 推出 Meshy 5 Preview。新版支援多視角影像輸入對齊,幾何邊緣更清晰利落,併為繫結角色庫擴充了 500 多套動作動畫。這意味著遊戲與影視開發者可以直接省掉大半手工修模和綁骨骼的髒活累活。
Midjourney 推出影片生成新特性,支援使用者自定義起始幀和結束幀畫面。這意味著創作者可以讓兩個畫面平滑形變過渡,或者直接生成無縫迴圈影片。該影片生成能力現已上線 Discord 機器人,不過官方表示網頁端體驗目前依然更好。
Runway 釋出上下文影片模型 Runway Aleph。它主打多工影片生成與編輯,能直接在原影片上增刪物體、改變場景視角,甚至任意修改風格與光照。目前已向所有付費使用者開放。
Leonardo.Ai 宣佈上線 Veo 3 Fast 模型。新版本可生成最高 1080p 解析度、帶聲音的 8 秒影片,生成速度比常規 Veo 3 最多快 3 倍,主要用於創意構思與提示詞測試,已面向 Leonardo 使用者計劃開放。
在週四的財報電話會上,Netflix 聯合 CEO Ted Sarandos 透露,原創劇《The Eternaut》首次使用生成式 AI 製作大樓坍塌特效,製作速度比傳統流程快了 10 倍,大幅削減了成本。他認為 AI 不僅能降本,還能幫創作者拍出更好的作品。
AI 音樂平臺 Suno 推出 v4.5+ 版本。新版本帶來了更多創作玩法,允許使用者直接替換人聲、調整或翻轉樂器伴奏,還能根據任意播放列表激發靈感生成歌曲,進一步降低了音樂二次創作與調整的門檻。
Adobe 為 Firefly 推出多項影片功能,支援使用者通過輸入描述並錄製一段人聲擬音,讓 AI 捕捉節奏和強度來生成匹配的音效。新版本還增加了構圖參考、關鍵幀裁剪等影片控制選項,並正式接入了 Google 的 Veo 3 影片模型。
Apple 宣佈為美加地區的 Apple News+ 訂閱使用者推出原創益智解謎小遊戲 Emoji Game。玩家需要用給出的 emoji(包括由 Apple Intelligence 生成的 Genmoji)填空補全短語,步數越少成績越好。遊戲現已支援 iOS 18.4 等系統,今年秋季還將整合進全新的 Apple Games 應用。
Midjourney 宣佈正開始調研開放企業級 API,以便使用者將其影像生成能力整合到自己的公司與服務中。官方目前已開放申請問卷,希望藉此瞭解潛在客戶的具體需求並收集功能反饋。
Lightricks 釋出開源模型 LTX Video 最新版,支援即時流式生成,創作者能在生成中途追加提示詞微調畫面。新模型最長可生成 60 秒連續影片,開源權重已上線 Hugging Face 與 GitHub,單張 H100 或消費級筆記型電腦即可執行。
Runway 釋出下一代動作捕捉模型 Act-Two,生成質量大幅提升,全面支援頭部、面部、身體與手部追蹤。創作者只需提供一段驅動表演影片和一個參考角色即可生成。不過目前僅面向企業客戶和創意合作伙伴開放。
Higgsfield AI 宣佈接入 Google Veo 3 影片生成模型。平臺將其與自家的 Soul ID 結合,主打高寫實與審美質感,旨在讓創作者在一個訂閱內獲得完整的端到端 AI 影片製作能力。
Exists 正式向公眾開放其 3D 虛擬世界生成平臺。與單純的影片擴散模型不同,它基於雲端定製的虛幻引擎執行;使用者只需輸入一段提示詞,就能直接生成帶光照、AI 角色和多人支援的可玩 3D 場景,零門檻創作屬於自己的虛擬世界。
Black Forest Labs 推出 Kontext Komposer 及配套預設功能。使用者不需要寫提示詞,就能直接給圖片換場景、重打光、做產品植入或做海報。目前該工具已在官方 Playground 免費開放。
Google 為 Gemini 推出「圖生影片」功能,依託 Veo 3 模型把靜態照片轉成 8 秒帶聲音的動態短片。使用者在輸入框選擇影片工具並上傳圖片即可生成。該功能目前先面向部分地區的 Google AI Pro 和 Ultra 訂閱使用者開放。
Moonvalley 正式向公眾開放 AI 影片模型 Marey 的訂閱,起售價每月 14.99 美元。該模型號稱完全使用開源授權資料訓練以避免版權糾紛,支援用滑鼠拖拽調整 3D 運鏡,最長生成 5 秒片段。
Dynamicslab 推出即時 AI 遊戲引擎 Mirage。它徹底拋棄了預製地圖與靜態資產,採用 Transformer 與擴散架構混合模型,根據玩家操作在雲端即時逐幀生成 3D 畫面。目前它以約 16 fps 在瀏覽器中串流執行,還支援上傳截圖即時生成可探索世界。