Meta 聯手 Shutterstock:用數百萬商業相簿與音影片訓練 AI
Meta 與 Shutterstock 宣佈擴大合作,Meta 將接入其數百萬張影像、影片和音樂素材庫來訓練和評估 AI 模型。Shutterstock 同時強調會為貢獻訓練資料的創作者提供分成補償。對 Meta 而言,買下正規版權庫能有效繞開版權雷區。
Meta 與 Shutterstock 宣佈擴大合作,Meta 將接入其數百萬張影像、影片和音樂素材庫來訓練和評估 AI 模型。Shutterstock 同時強調會為貢獻訓練資料的創作者提供分成補償。對 Meta 而言,買下正規版權庫能有效繞開版權雷區。
演員兼 Mint Mobile 老闆 Ryan Reynolds 使用 AI 編寫了品牌最新廣告。該系列短片向來主打通過省錢把實惠留給消費者。儘管使用 AI 存在倫理爭議,但 Reynolds 藉助這種嘗試,再次強化了其幽默又省錢的品牌人設。
衛報披露英國 ITV 喜劇《Deep Fake Neighbour Wars》幕後細節。技術團隊 StudioNeural 用 AI 把演員即時換成各路名流,演繹鄰里瑣碎衝突。不過受限於技術,演員拍攝時必須一直面朝鏡頭不能大幅轉頭,劇集將於 1 月 26 日上線 ITVX。
MIT CSAIL 團隊公佈一種多模態表徵學習方法,讓 AI 能在共享嵌入空間裡對齊影片、音訊和文本,僅用 1000 個詞向量就能識別影片中的動作。最值得關注的是,這種設計提升了跨模態檢索準確度和可解釋性。不過模型目前一次只能處理兩種模態。
在 CES 2023 上,Nvidia 宣佈將於 2 月推出 RTX 影片超解析度功能,支援配備 RTX 30 或 40 系列顯示卡的 PC 在 Chrome 與 Edge 瀏覽器中將 1080p 網頁影片提升至 4K。該功能可平滑畫面塊狀瑕疵,但暫不支援 RTX 20 系列與 Firefox 瀏覽器。
NVIDIA 開放 Omniverse Avatar Cloud Engine(ACE)搶先體驗。該服務將 Audio2Face 面部動畫與 Riva 語音合成打包為雲原生微服務,支援虛幻引擎 MetaHuman 與 Ready Player Me。開發者無需本地重型算力,即可在雲端快速生成可互動的 3D 數字人與虛擬助手。
2022 年底,韓國公司 DeepBrain AI 推出 Re;memory 付費服務。該技術結合照片、影片與預先採訪資料,通過影像合成和語音識別構建虛擬人,讓家屬在 400 英寸大屏體驗館內進行 30 分鐘即時影片對話,彌補未盡的告別。
AI 影片平臺 Synthesia 利用梅西 5 分鐘的真實片段,生成了他用流利英語等 10 種語言發言的合成影片。嘴型與發音高度貼合,引得球迷驚呼「逼真到可怕」。梅西在現實中極少公開講英文,這也體現了深度學習人像合成跨越語言隔閡的能力。
前 Meta 開發者推出短影片生成工具 QuickVid。使用者只需輸入一個提示詞,它就能呼叫 GPT-3 寫指令碼、DALL-E 2 生圖、Google TTS 配音並拼接背景素材。最值得關注的是,它把零散 AI 串成了短影片流水線,但也引發了垃圾內容氾濫的擔憂。
CACM 報道了 AI 對好萊塢製片流程的改造。Flawless 的神經網路可修改演員面部配合新錄音,Digital Domain 能用演算法生成替身。這不僅能減少補拍成本,但也引發了關於演員授權與知情同意的倫理擔憂。
由《南方公園》主創 Trey Parker 與 Matt Stone 創立的 AI 娛樂公司 Deep Voodoo 宣佈完成 2000 萬美元融資,由 Connect Ventures 領投。這是該公司首次引入外部資本,資金將用於加速換臉與合成媒體技術研發,為影視業提供更低成本、更快速的視覺特效服務。
Reface 執行長在《福布斯》撰文,分析生成式 AI 對藝術創作與商業的衝擊。從 DreamStudio 首月破百萬使用者到設計工具全面接入,AI 正在顛覆內容生產。他建議企業積極把 AI 工具嵌入產品,將普通使用者轉化為創作者。