跳到正文
IFAI

產業動態

NVIDIA CloudXR 6.0 接入 Vision Pro:RTX 4K 畫質直接串流到頭顯

首次發布 傳播指數 39

NVIDIA 在 GTC 上宣佈 CloudXR 6.0 原生整合 Apple Vision Pro。藉助動態注視點串流,本地或雲端 RTX GPU 可將高精度 4K 畫面以低延遲推送到頭顯,告別傳統輕量化降質。開發者即日起可用 Swift 框架構建應用,系統更新定於今年春季推送。

圖:blogs.nvidia.com

戴上頭顯做複雜 3D 設計,過去總面臨一個尷尬的二選一。要麼連著一根笨重的線纜插在工作站上,走兩步都怕被絆倒;要麼用一體機獨立計算,但得把幾千萬面的工業模型刪減壓縮到粗糙不堪。

在聖何塞舉行的 GTC 大會上,NVIDIA 和 Apple 拿出了一個新解法:visionOS 開始原生支援 NVIDIA CloudXR 6.0 串流技術。不管是工位上的 RTX 工作站,還是雲端的 GeForce RTX 顯示卡,算力都能直接無線推流到 Apple Vision Pro 裡。

眼睛看哪,算力就往哪堆

無線串流最怕兩件事:畫質發糊和延遲太高讓人眩暈。這次兩家拿出的核心殺手鐧,是動態注視點串流。

這項技術配合預計今年春季推出的 visionOS 26.4,能根據眼睛大致注視的焦點區域,動態提高該區域的渲染解析度,周邊餘光區域則適當降低。這樣既保證了人眼聚焦處的超高畫質晰度,又大幅壓低了網路頻寬和算力消耗。

更巧妙的是隱私處理。眼動追蹤資料並沒有直接開放給第三方應用,底層系統在保護視線隱私的同時完成了注視點渲染。也就是說,開發者拿不到你的眼球軌跡,但頭顯依然知道該把 4K 細節懟在哪。

另外,CloudXR 6.0 這次直接做成了 Swift 原生框架。蘋果生態的開發者可以直接在 Xcode 裡呼叫,不需要再為了串流折騰複雜的中介軟體,企業應用和消費類工具都能開箱即用。

從流水線廠房到模擬賽車座艙

這套方案一出來,最興奮的是汽車和工業製造巨頭。過去造一輛新車,做 1:1 的光追油泥模型評審非常折騰。

Autodesk 和 Innoactive 合作開發的 Immersive for Autodesk VRED 計劃在今年春季晚些時候上線。寶馬、起亞、Rivian 和沃爾沃集團已經在用它做全尺寸光追設計評審。全球團隊成員戴著頭顯,就能在同一個空間裡看車漆在不同光線下的反射細節。

在醫療和製造領域,羅氏製藥把 Autodesk Revit 和 NVIDIA Omniverse 結合,在現實裡動工前先在頭顯裡模擬體液分析實驗室的走線與佈局。富士康用它做廠房漫遊和工位最佳化。資料中心運營商 Switch 則聯手 Trifork,在 Vision Pro 裡實時監控和管理 AI 工廠的數字孿生。

除了這些嚴肅的大型企業業務,桌面模擬發燒友也分到了一杯羹。像 iRacing 和 X-Plane 這樣的高負載模擬飛行與賽車遊戲,現在也能借助 RTX 顯示卡無損推流到頭顯中,把 Vision Pro 當成一臺原生的雙目 4K 模擬座艙。

為什麼重要

我們認為,這是 Apple Vision Pro 自發布以來,在企業級生產力上走得最紮實的一步。

Vision Pro 擁有極強的雙目 4K 顯示面板和精準的空間定位,但自帶的 M 系列晶片即便再強,也不可能在極低功耗下本地硬扛幾千萬面的工業光追資產。它過去像一臺空有頂級視網膜屏、卻沒有對應工業級算力驅動的裝置。現在背靠 NVIDIA RTX 顯示卡和雲端算力,這塊短板被徹底補齊了。

對於汽車設計、建築規劃和模擬工程師來說,這套工具非常值得在今年春季 visionOS 26.4 推送後第一時間上手。你不再需要在辦公室裡搭建昂貴且笨重的多屏洞穴系統,也不用反覆把高精模型輕量化處理,設計評審的協作成本直接被砍掉了一大半。

從行業競爭來看,NVIDIA 沒有自己去碰頭顯硬體,而是把算力管道直接接進了蘋果生態最高階的裝置裡,這一步走得相當精明。它不僅鞏固了 RTX 在工業渲染底座上的統治地位,還順手幫蘋果解決了企業端缺乏殺手級重度應用的尷尬。

不過隱患也顯而易見。既然核心依賴無線串流,整套體驗就極其依賴本地區域網或雲端專線的網路頻寬和抖動控制。在網路環境複雜的車間或跨國協同中,延遲是否真能做到完全不眩暈,依然需要企業在實際落地時打上一個問號。

來源 (1)

  1. [1]
    blogs.nvidia.com(在新分頁開啟)原文blogs.nvidia.com

每日 AI 內容精選