跳到正文
IFAI

行业动态

NVIDIA CloudXR 6.0 接入 Vision Pro:RTX 4K 画质直接串流到头显

首次发布 传播指数 39

NVIDIA 在 GTC 上宣布 CloudXR 6.0 原生集成 Apple Vision Pro。借助动态注视点串流,本地或云端 RTX GPU 可将高精度 4K 画面以低延迟推送到头显,告别传统轻量化降质。开发者即日起可用 Swift 框架构建应用,系统更新定于今年春季推送。

图:blogs.nvidia.com

戴上头显做复杂 3D 设计,过去总面临一个尴尬的二选一。要么连着一根笨重的线缆插在工作站上,走两步都怕被绊倒;要么用一体机独立计算,但得把几千万面的工业模型删减压缩到粗糙不堪。

在圣何塞举行的 GTC 大会上,NVIDIA 和 Apple 拿出了一个新解法:visionOS 开始原生支持 NVIDIA CloudXR 6.0 串流技术。不管是工位上的 RTX 工作站,还是云端的 GeForce RTX 显卡,算力都能直接无线推流到 Apple Vision Pro 里。

眼睛看哪,算力就往哪堆

无线串流最怕两件事:画质发糊和延迟太高让人眩晕。这次两家拿出的核心杀手锏,是动态注视点串流。

这项技术配合预计今年春季推出的 visionOS 26.4,能根据眼睛大致注视的焦点区域,动态提高该区域的渲染分辨率,周边余光区域则适当降低。这样既保证了人眼聚焦处的超高清晰度,又大幅压低了网络带宽和算力消耗。

更巧妙的是隐私处理。眼动追踪数据并没有直接开放给第三方应用,底层系统在保护视线隐私的同时完成了注视点渲染。也就是说,开发者拿不到你的眼球轨迹,但头显依然知道该把 4K 细节怼在哪。

另外,CloudXR 6.0 这次直接做成了 Swift 原生框架。苹果生态的开发者可以直接在 Xcode 里调用,不需要再为了串流折腾复杂的中间件,企业应用和消费类工具都能开箱即用。

从流水线厂房到模拟赛车座舱

这套方案一出来,最兴奋的是汽车和工业制造巨头。过去造一辆新车,做 1:1 的光追油泥模型评审非常折腾。

Autodesk 和 Innoactive 合作开发的 Immersive for Autodesk VRED 计划在今年春季晚些时候上线。宝马、起亚、Rivian 和沃尔沃集团已经在用它做全尺寸光追设计评审。全球团队成员戴着头显,就能在同一个空间里看车漆在不同光线下的反射细节。

在医疗和制造领域,罗氏制药把 Autodesk Revit 和 NVIDIA Omniverse 结合,在现实里动工前先在头显里模拟体液分析实验室的走线与布局。富士康用它做厂房漫游和工位优化。数据中心运营商 Switch 则联手 Trifork,在 Vision Pro 里实时监控和管理 AI 工厂的数字孪生。

除了这些严肃的大型企业业务,桌面模拟发烧友也分到了一杯羹。像 iRacing 和 X-Plane 这样的高负载模拟飞行与赛车游戏,现在也能借助 RTX 显卡无损推流到头显中,把 Vision Pro 当成一台原生的双目 4K 模拟座舱。

为什么重要

我们认为,这是 Apple Vision Pro 自发布以来,在企业级生产力上走得最扎实的一步。

Vision Pro 拥有极强的双目 4K 显示面板和精准的空间定位,但自带的 M 系列芯片即便再强,也不可能在极低功耗下本地硬扛几千万面的工业光追资产。它过去像一台空有顶级视网膜屏、却没有对应工业级算力驱动的设备。现在背靠 NVIDIA RTX 显卡和云端算力,这块短板被彻底补齐了。

对于汽车设计、建筑规划和仿真工程师来说,这套工具非常值得在今年春季 visionOS 26.4 推送后第一时间上手。你不再需要在办公室里搭建昂贵且笨重的多屏洞穴系统,也不用反复把高精模型轻量化处理,设计评审的协作成本直接被砍掉了一大半。

从行业竞争来看,NVIDIA 没有自己去碰头显硬件,而是把算力管道直接接进了苹果生态最高端的设备里,这一步走得相当精明。它不仅巩固了 RTX 在工业渲染底座上的统治地位,还顺手帮苹果解决了企业端缺乏杀手级重度应用的尴尬。

不过隐患也显而易见。既然核心依赖无线串流,整套体验就极其依赖本地局域网或云端专线的网络带宽和抖动控制。在网络环境复杂的车间或跨国协同中,延迟是否真能做到完全不眩晕,依然需要企业在实际落地时打上一个问号。

来源 (1)

  1. [1]
    blogs.nvidia.com(在新标签页打开)原文blogs.nvidia.com

每日 AI 内容精选