Stability AI 釋出 SDXL 0.9:引數翻倍,消費級顯示卡也能跑
Stability AI 推出文生圖模型 SDXL 0.9,畫面細節相比 4 月的測試版大幅升級。新版本採用兩階段生成架構,組合引數達 6.6B,能在 8GB 視訊記憶體的消費級顯示卡上跑出 1024x1024 影像。普通使用者現可通過 Clipdrop 試用,正式開源版 1.0 預計 7 月中旬到來。
Stability AI 推出文生圖模型 SDXL 0.9,畫面細節相比 4 月的測試版大幅升級。新版本採用兩階段生成架構,組合引數達 6.6B,能在 8GB 視訊記憶體的消費級顯示卡上跑出 1024x1024 影像。普通使用者現可通過 Clipdrop 試用,正式開源版 1.0 預計 7 月中旬到來。
Hidden Door 推出基於生成式 AI 的《綠野仙蹤》角色扮演平臺限量測試,完整版預計 2023 年冬季上線。AI 敘述者會根據玩家的選擇即時生成定製劇情、角色和插畫,讓經典童話變成可互動的敘事沙盒。遊戲目前通過其 Discord 頻道提供測試。
Meta 公佈語音生成模型 Voicebox。它基於上下文學習,只需 2 秒音訊樣本就能模仿音色合成語音,支援 6 種語言的風格遷移,還能像橡皮擦一樣切除雜音並重生成無縫語音。
Google 宣佈推出服裝虛擬試穿功能。該功能放棄了傳統的影像變形貼圖,轉而利用擴散模型與交叉注意力機制從頭生成畫素,真實呈現衣服在不同體型模特身上的垂墜和拉伸效果。目前已率先支援 H&M、Everlane 等品牌的女式上衣。
Paul McCartney 透露已藉助 AI 完成披頭士「最後一首歌」。團隊用分離技術從老卡帶裡剝離出 John Lennon 的純淨人聲再做混音,解決了當年因雜音無法處理的難題。這首擱置數十年的作品預計將在年內正式推出。
Meta 推出音樂生成模型 MusicGen,支援通過文本描述或旋律提示來創作音樂。該模型基於 2 萬小時的音樂和樂器樣本訓練,理論上只要哼個調子就能生成變體曲目。這意味著零門檻音樂創作正在成真,但也可能面臨音樂產業的版權挑戰。
Adobe 推出新版 Adobe Express,直接接入 Firefly 生成式 AI,支援用日常語言生成影像和藝術字特效。新版還換上了全新的多合一編輯器,把拖拽式影片剪輯、PDF 處理以及與 Photoshop、Illustrator 的即時雲端協作打通。
Runway 宣佈影片生成模型 Gen-2 正式向所有人開放,不再需要排隊等候名單,也不用在 Discord 裡生成。平臺還提供 90 秒的免費影片生成時長,額度用完後才需付費。也就是說,任何人現在都能直接在網頁端體驗 AI 影片生成了。
3D 內容平臺 Tafi 宣佈正在開發文生 3D 角色引擎。該模型基於其 Genesis 資料集訓練,生成的角色可原生匯出至 Unreal、Unity、Blender 及 NVIDIA Omniverse 等平臺。平臺還為自願加入訓練的創作者設計了歸屬與收益分成機制。
Google 推出風格遷移方法 StyleDrop。它基於 Muse 文生圖模型,僅需單張參考圖就能捕捉配色、光影和紋理,微調極少數引數即可在三分鐘內完成學習,風格控制效果優於 LoRA 和 DreamBooth。
一張疑似 AI 生成的五角大樓爆炸假圖在 Twitter 瘋傳,包括俄羅斯 RT 等大號轉發。美股在 4 分鐘內跳水 0.26%,隨後反彈。當地消防部門迅速闢謠澄清並無事故,網友也指出了圍欄扭曲等典型 AI 生成破綻。
Stability AI 釋出面向開發者的 Stable Animation SDK,讓使用者能呼叫 Stable Diffusion 模型生成動畫。該工具支援純文本、圖片加文本、影片加文本三種生成方式,開發者可通過動畫端點直接把生成能力整合進自己的產品和工作流中。
Google 在 I/O 大會上宣佈 Android 將在秋季推出生成式 AI 桌布。使用者只需挑選預設提示詞即可生成專屬桌布,系統主題色還會自動適配;此外 Pixel 手機下月還將率先獲得 3D 電影桌布和 Emoji 桌布。
本週,Grimes 推出 AI 語音軟體 Elf.Tech,允許創作者上傳錄音並轉換成她的音色。生成的歌聲可以直接用於製作新曲,前提是將曲目 50% 的錄音版稅分給她。最值得關注的是,她選擇將個人聲線主動「開源」變現,把版權糾紛轉變成合作分成。