傳 Google 將把 PaLM 2 用於廣告與 YouTube:自動生成素材與影片創意
據外媒報道內部檔案顯示,Google 計劃利用新推出的 PaLM 2 大模型改造廣告業務與 YouTube。廣告主能借此自動生成廣告素材,創作者也能獲得影片選題靈感和標題推薦。在廣告營收增長放緩的背景下,Google 試圖用生成式 AI 盤活核心收入盤子。
據外媒報道內部檔案顯示,Google 計劃利用新推出的 PaLM 2 大模型改造廣告業務與 YouTube。廣告主能借此自動生成廣告素材,創作者也能獲得影片選題靈感和標題推薦。在廣告營收增長放緩的背景下,Google 試圖用生成式 AI 盤活核心收入盤子。
Stability AI 釋出面向開發者的 Stable Animation SDK,讓使用者能呼叫 Stable Diffusion 模型生成動畫。該工具支援純文本、圖片加文本、影片加文本三種生成方式,開發者可通過動畫端點直接把生成能力整合進自己的產品和工作流中。
Meta 開源全新 AI 研究模型 ImageBind。它首次將文本、音訊、影像影片、熱感、深度以及來自 IMU 的運動感測器資料整合進同一個嵌入空間。這意味著未來的生成式模型能根據動作或聲音反推畫面,不過目前它仍處於研究階段,沒有直接落地產品。
好萊塢編劇工會(WGA)因與製片人聯盟談判破裂發起罷工。工會要求禁止使用 AI 編寫或改寫劇本、禁止將其用作原料或訓練模型,但遭到拒絕。編劇真正擔心的不是被淘汰,而是製片方用 AI 寫初稿、壓榨人類低價修改。
據 Financial Times 報道,Google 計劃將生成式 AI 整合進廣告系統 Performance Max。客戶只需提供圖文與影片,AI 就能自動生成媲美專業機構的營銷方案。針對外界對虛假廣告的擔憂,Google 承諾上線前將設立防線。
Amazon 在 Prime Video 上線功能 Dialogue Boost。它利用 AI 識別並單獨增強人聲,避免臺詞被背景音樂和特效蓋過。使用者無需高階音響即可在普通裝置上調節兩檔清晰度,首批已支援部分原創影片。
Synthesis AI 在其線上平臺 synthesis labs 中展示了文本生成 3D 數字人技術,使用者輸入年齡、髮型和服裝等提示詞,就能直接生成高解析度的 3D 模型。系統將幾何網格與紋理生成拆開處理,還支援用滑塊微調錶情與光照,大幅降低了遊戲、特效及模型訓練合成數據的製作成本。
Adobe 宣佈即將把生成式 AI 工具 Firefly 引入 Creative Cloud 影片與音訊應用。新功能雖不能直接文生影片,但支援用幾句提示詞給影片調色、生成音效與配樂,甚至讀劇本自動生成分鏡。能力依然主打商業安全,目前僅公佈了官方演示。
Adobe 宣佈在 Premiere Pro 中推出「基於文本的編輯」(Text-Based Editing),由 Adobe Sensei 驅動。系統會自動轉錄音影片素材,剪輯師直接搜尋、複製或貼上轉錄文字,時間軸上的影片片段就會同步調整。該功能目前處於公開測試階段,預計 5 月正式上線。
據 TechCrunch 報道,Apple 已低調收購初創公司 WaveOne。WaveOne 研發基於 AI 的「內容感知」影片編解碼技術,能優先保留人臉等關鍵細節,號稱將影片體積減少最多一半。這項技術有望幫助 Apple TV+ 等服務大幅降低頻寬成本並提升畫質。不過 Apple 官方暫未對此回應。
Wonder Dynamics 推出網頁工具 Wonder Studio。它免去動捕裝置和綠幕,僅憑單機位實拍就能把真人換成 CG 角色並匹配燈光。最值得關注的是,它能直接匯出 Blender 場景與動捕資料等分層資產,大幅降低影視特效門檻。
微軟將多模態視覺模型 Florence 引入 Azure 認知服務開放預覽,Reddit 將利用該 API 為圖片自動生成無障礙替代文本。Florence 基於數十億圖文對訓練,單圖最多可打上萬個標籤,還支援影片摘要與摳圖;目前僅面向 Azure 現有客戶開放預覽。
據 The Verge 報道,TikTok 濾鏡 Bold Glamour 走紅,即便拿手遮臉也幾乎不穿幫,相關影片超 900 萬條。專家推測其運用了端側 GAN 等生成式 AI,TikTok 官方則未予置評。極度自然的重塑效果引發了人們對外貌焦慮的擔憂。
YouTube 新任 CEO Neal Mohan 透露正為創作者開發生成式 AI 工具,能一鍵虛擬換裝或生成奇幻背景。工具預計未來幾個月內推出並配備安全護欄。這標誌著 YouTube 正式把生成式 AI 納入核心創作流程。
Runway 釋出影片生成模型 Gen-1,主打「影片到影片」轉換。使用者輸入一段普通實拍影片,搭配文字提示或靜止圖片,就能將其直接變成黏土動畫、夜景天際線或 3D 渲染場景。模型目前處於早期研究測試階段,未來數週逐步擴大開放。
Twitch 直播節目《Nothing, Forever》已連續開播超一個月,全天候播放 AI 生成的《宋飛正傳》仿作。其臺詞由 GPT-3 即時編寫,語音與鏡頭排程也全由演算法接管。雖然角色時常穿模、笑話無厘頭,但團隊藉此展現了一場永不落幕的自動化內容試驗。
週二,AI 公司 Metaphysic 宣佈其工具 Metaphysic Live 將用於羅勃·辛密克斯新片《Here》,為湯姆·漢克斯和羅賓·懷特進行即時面部替換與減齡。該工具能在拍攝現場即時生成高畫質畫面,無需傳統後期合成特效,演員甚至能當成「青春鏡」即時調整表演。
脫口秀主持人 Jimmy Kimmel 在節目 20 週年特輯中,利用 Deepfake 技術與 2003 年的年輕自己完成了一場跨時空對話。製作團隊通過演員扮演配合面部替換呈現逼真互動,展示了換臉技術在主流電視娛樂中的成熟度。
OpenAI CEO Sam Altman 在採訪中給備受矚目的 GPT-4 潑冷水,稱網傳的 100 萬億引數對比圖純屬扯淡,公眾過高的預期註定會失望。他澄清目前還沒有搞出 AGI,釋出時間也沒有定數,只有在確保安全可靠時才會推出。此外,OpenAI 也在研發影片生成模型。
Nvidia 在 Broadcast 1.4 中加入測試版「眼神接觸」(Eye Contact)功能。它利用 AI 即時生成一雙虛擬眼睛,哪怕你在看稿或看別處,畫面裡依然直視鏡頭;視線偏離過遠時效果會自動斷開。目前只要有 RTX 顯示卡就能下載體驗。