Stability AI 釋出日語圖文模型 Japanese InstructBLIP Alpha:能認晴空塔與金閣寺
Stability AI 推出首個日語視覺語言模型 Japanese InstructBLIP Alpha。它基於 InstructBLIP 架構與日語大模型打造,能精準識別日本特色地標並完成圖文問答,目前已在 Hugging Face 開源,僅限研究使用。
Stability AI 推出首個日語視覺語言模型 Japanese InstructBLIP Alpha。它基於 InstructBLIP 架構與日語大模型打造,能精準識別日本特色地標並完成圖文問答,目前已在 Hugging Face 開源,僅限研究使用。
Meta 宣佈將計算機視覺模型 DINOv2 轉向 Apache 2.0 協議,正式允許商業使用,並同步推出語義分割與深度估計擴充套件模型。此外,Meta 還發布了評估視覺模型公平性的基準 FACET,包含 3.2 萬張標註影像,僅供研究評估。
本週,Niantic 為其 WebAR 平臺 8th Wall 推出生成式 AI 工具模組,集成了 Inworld AI 與 OpenAI。開發者可直接在網頁 AR 中加入互動式 AI 角色,或利用 DALL-E 生成 3D 物品紋理貼圖。官方還同步放出了兩個示例專案。
Ideogram 宣佈文生圖模型 Ideogram 0.1 正式免費向所有人開放。該模型主打攻克現有工具的缺陷,能在圖片中直接渲染連貫且美觀的文字,支援字型排版與多種風格標籤。最值得關注的是,它解決了 AI 生成文字模糊錯亂的通病。
Google DeepMind 聯合 Google Cloud 釋出 SynthID 測試版。該工具將數字水印直接嵌入影像畫素,肉眼無法察覺,加濾鏡或壓縮後依然能被檢測出來。目前該功能正面向 Vertex AI 平臺使用 Imagen 的部分客戶開放測試。
AI 遊戲資產生成平臺 Scenario 推出 Unity 外掛。遊戲開發者可以直接在 Unity 編輯器中呼叫其能力,生成風格一致的瓦片地圖、角色頭像、道具和場景等視覺素材。這意味著開發者無需在繪圖軟體與遊戲引擎間來回切換。
Stability AI 宣佈與 NVIDIA 合作,通過 TensorRT 深度最佳化 SDXL 並開放 ONNX 權重。在 H100 GPU 上模型效能翻倍,高畫質圖生成僅需 1.47 秒,延遲降低 41%、吞吐量提升 70%。生圖效率大幅提高,能直接降低創作者與開發者的部署成本。
微軟將免費 AI 設計工具 Microsoft Designer 正式內建進 Edge 瀏覽器側邊欄,面向美國使用者開放。輸入文字提示詞即可直接生成社交媒體海報、賀卡或邀請函,並支援微調圖文。微軟想用這種隨手呼叫的方式,硬剛加入 AI 功能的 Canva。
據報道,Microsoft 正在測試為 Windows 11 內建應用引入 AI 能力。畫圖應用或將加入類似 Bing Image Creator 的文生圖與背景去除功能,截圖工具和相機將支援 OCR 提取文字。部分功能或需 NPU 硬體支援,目前仍處於早期實驗階段。
NVIDIA 在 Gamescom 推出 DLSS 3.5,重點引入光線重建技術。官方用超算訓練的 AI 網路取代傳統人工降噪器,訓練資料量比 DLSS 3 增加 5 倍,能明顯改善反射與全域性光照,面向所有 RTX 顯示卡開放,今秋將落地《賽博朋克 2077》等大作。
據 TechCrunch 報道,Snapchat 正在開發名為「Dreams」的生成式 AI 功能。使用者上傳清晰自拍後,系統能將自己和好友合成到奇幻場景中。程式碼中還出現了「Dream Packs」付費包痕跡,目前 Snapchat 暫未正式回應上線時間。
美國聯邦地方法院法官 Beryl A. Howell 裁定,完全由 AI 生成的藝術作品無法獲得版權保護,駁回了 Stephen Thaler 對美國版權局的訴訟。法官強調「人類作者身份是版權的基石」,沒有人類引導的作品不享有版權。原告方已計劃提出上訴。
WhatsApp 在 Android 最新測試版中上線生成式 AI 貼紙功能。使用者不用再在貼紙庫裡翻找,在鍵盤貼紙欄點選「建立」並輸入文字描述,AI 就會自動生成幾款貼紙供挑選。目前僅面向部分測試使用者開放,預計未來幾週推向更多人。
Adobe 宣佈整合 Firefly 生成式 AI 的 Adobe Express 網頁版結束公測並全球上線。使用者憑免費的 Adobe ID 即可在瀏覽器裡製作圖片、影片和 PDF,提示詞支援 100 多種語言。移動端版本也將在近期推出。
前 Machine Zone CEO 創立的 Alias Technologies 推出社交應用 BeFake。使用者通過輸入文本提示詞,就能將日常自拍轉化為 AI 奇幻視覺圖。創始人認為人們在社交網路上其實更渴望展示理想中的自己,用 AI 創作不僅能減少發帖壓力,還能打破真實外貌的束縛。
Google 宣佈為 Google 相簿推出全新的「回憶」檢視。AI 會自動把照片和影片整理成類似剪貼簿的時間線,支援多人協作補充內容,還通過生成式 AI 帶來了「幫我起標題」功能。新檢視當天在美上線,後續推向全球。
NVIDIA 介紹了 3D 網格生成新方法 FlexiCubes。它引入了可精細調節的柔性引數,能在基於最佳化的 AI 流水線中直接替代傳統的 Marching Cubes 演算法,大幅提高複雜幾何細節的還原度,且生成的網格可直接投入物理模擬。
Shutterstock 宣佈藉助 NVIDIA Picasso 雲服務開發 3D 場景背景生成功能。創作者輸入文本或影像提示詞,就能生成 8K 解析度的 360 度環境貼圖來為 3D 場景打光和做背景,模型訓練全部基於完全授權的資料。說白了,就是把繁瑣的環境佈景交給 AI,讓 3D 藝術家省下時間專心摳主體模型。
NVIDIA 在 SIGGRAPH 宣佈推出一系列加速 OpenUSD 採用的雲 API 與開發者計劃。核心工具包括能生成 Python 指令碼的 AI 助手 ChatUSD,以及做資產語義檢索的 DeepSearch 智慧體。黃仁勳想把 OpenUSD 變成 3D 領域的 HTML,降低構建工業數字孿生的門檻。
NVIDIA 宣佈 CEO 黃仁勳將於 8 月 8 日在 SIGGRAPH 發表主題演講。他將帶來 NVIDIA 最新生成式 AI 內容創作方案,並探討與蘋果、皮克斯等聯手成立 OpenUSD 聯盟後在 3D 協作上的新突破。