创建 AI 工厂和医疗实验室的数字孪生。在扩展现实 (XR) 中设计外观时尚的汽车,并实现物理精确的颜色和照明效果。完全沉浸在高分辨率赛车游戏或其他模拟游戏中。这些只是专业人士、开发者和爱好者通过空间计算所能实现的部分应用,通过 NVIDIA CloudXR 6.0 串流技术套件,并通过现已与 Apple Vision Pro 原生集成的套件,他们可以将数字内容与物理世界无缝融合。
在本周于圣何塞举行的 NVIDIA GTC 全球 AI 大会上,NVIDIA 和 Apple 详细介绍了 visionOS 如何支持 NVIDIA CloudXR 的注视点流式传输技术,使应用能够在 Apple Vision Pro 上显示高分辨率、低延迟的沉浸式内容。该功能可根据用户视线位置进行智能优化渲染分辨率,同时严格保护用户注视数据。
Apple 视觉产品高级总监 Jeff Norris 表示:“Apple Vision Pro 正在重新定义专业人士利用空间计算的能力,使团队能够以全新的方式进行可视化、协作和工作,并实现超高的保真度。与 NVIDIA 一起,我们将 visionOS 的强大功能与 CloudXR 串流技术相结合,提供高保真体验,加速从汽车设计到医疗健康、航空等各行各业的工作。”
要求严苛的 XR 和空间计算工作负载有三个关键要求:4K 分辨率下无损的高保真视觉效果、实时响应速度和完全沉浸式体验。适用于 visionOS 的 CloudXR 实现了这三点。借助这一全新集成,用户可以戴上 Apple Vision Pro,通过 Innoactive XR 流媒体解决方案支持的 Immersive for Autodesk VRED 等应用增强其空间计算工作流,从 NVIDIA RTX PRO 工作站到 GeForce RTX GPU,自动原生地从 PC 端或云端的 NVIDIA RTX 技术设备进行流媒体传输。

Apple Vision Pro 的空间计算能力与 NVIDIA RTX 技术提供的出色图形引擎相结合,可实时提供高保真、沉浸式视觉效果。
越来越多的生态系统合作伙伴正在利用适用于 visionOS 的 CloudXR 来改变他们的工作流。Autodesk、Innoactive、新思科技、Trifork、X-Plane 和 iRacing 等领先软件提供商正在使用该集成向 Apple Vision Pro 原生传输高保真应用。这使 Roche、Foxconn 和 Switch 等企业以及起亚、宝马集团、Rivian 和沃尔沃集团等汽车领导者能够以不折不扣的逼真度可视化海量 3D 资产和复杂仿真。
性能与沉浸感兼得
此前,将高保真 3D 资产引入到独立设备上通常需要开发者降低或大幅简化数据集。适用于 visionOS 的 CloudXR 让专业人员能够以高保真度审阅设计和数字孪生,在保持质量的同时减少不必要的工作。
动态注视点流式传输 (Dynamic Foveated Streaming) 是 CloudXR 6.0 和 visionOS 26.4 支持的一项功能,可确保在焦点处实现尽可能高的视觉保真度,同时最大限度地提高性能和带宽效率。
近似视线数据不会暴露给应用,在严格保护用户隐私的同时提供实现舒适、逼真沉浸感的超低延迟。

行业领导者加速图形工作流
Immersive for Autodesk VRED 将于今年春季晚些时候推出,由 Autodesk 与 Innoactive 共同开发,旨在为包括宝马、起亚、Rivian 和沃尔沃集团在内的汽车巨头改变设计审阅流程。使用 Autodesk VRED 的设计师现在可以在 Apple Vision Pro 中以 1:1 的比例使用 RTX 驱动的光线追踪来可视化大型模型。
Autodesk 汽车设计副总裁 Thomas Heermann 表示:“通过结合 Autodesk VRED 与 NVIDIA CloudXR、Apple Vision Pro 空间计算和 Innoactive 的应用专业知识,我们能够实现沉浸式实时协作,而无需受限于传统高端设置。汽车设计审阅是高风险时刻,团队需要快速迭代并做出自信决策。通过使审阅流程更加无缝,公司可以减少在基础设施上花费的时间,而将更多时间用于将产品变为现实。”

Innoactive 首席执行官 Daniel Seidl 表示:“企业正在从单用户 XR 试点转向协作式多地点部署,这需要跨地点的性能、控制和可扩展性,而 Innoactive 的企业 XR 流媒体解决方案可将工作站级可视化直接流式传输到 Apple Vision Pro 在内的空间设备,用于产品展示厅、设计审查和数字孪生。”
起亚汽车全球设计中心执行副总裁兼负责人 Karim Habib 表示:“通过将沉浸式空间计算与适用于 visionOS 的 CloudXR 集成到我们的工作流中,我们可以在 Apple Vision Pro 上以更高的清晰度和更快的速度评估我们的设计。我们可以共同在共享的真实环境中体验比例、表面、颜色和材质,并与全球团队进行实时协作。通过这些合作,我们可以不断改进流程,最大化效率,并始终专注于每个决策背后的创意意图。”
沃尔沃集团设计部负责人 Mikael Gordh 表示:“在沃尔沃集团设计部,我们坚持数字化优先,只有在必要时才构建物理原型。空间计算、Apple Vision Pro 和 CloudXR 使我们能够提前体验用户看到和触摸的一切。这项技术可提供前所未有的逼真效果:通过无缝协作实现优质体验。超越车辆,塑造交通的未来。”

制药公司罗氏与 Innoactive 协作,正在使用 Autodesk Revit 软件、NVIDIA Omniverse 库以及适用于 visionOS 的 CloudXR,在空间计算中模拟其生物流体分析实验室的布局,然后再在现实世界中建造。
制造商 Foxconn 正在使用适用于 visionOS 的 CloudXR 可视化工厂车间走查,以便设计师在实际踏入工厂之前探索和优化设施。
MHP 是一家为出行和制造业客户提供管理和 IT 咨询服务的公司,该公司正在使用新思科技 Ansys Discovery 3D 产品仿真软件、Omniverse 和 Innoactive Spatial,并利用适用于 visionOS 的 CloudXR 来仿真实时空气动力学气流。
数据中心平台提供商 Switch 与 Trifork 协作,展示了其 EVO AI 工厂的 Omniverse 数字孪生。通过利用适用于 visionOS 的 CloudXR,Switch 能够在完全沉浸式的空间环境中优化基础设施,使运营商能够随时随地监控和管理复杂的数据中心布局。

为开发者释放制作和娱乐潜力
除了企业用例之外,适用于 visionOS 的 CloudXR 还让模拟爱好者能够将 iRacing 和 X-Plane 等高保真 RTX 游戏连接到 Apple Vision Pro,从而打造出具有出色 4K 分辨率的终极模拟装备。
CloudXR 6.0 现已面向开发者推出,作为 Swift 的原生流式框架,Swift 是适用于 Apple 平台 (包括 visionOS、iOS、iPadOS 等) 的编程语言。
这意味着 Swift 开发者可以在 Apple 的集成开发环境 Xcode 中直接流式传输和构建高保真度消费者和企业应用,Xcode 用于在 Apple 平台上开发、测试和分发应用。visionOS 26.4 和这些应用将于今年春季向用户提供。
观看 NVIDIA 创始人兼首席执行官黄仁勋的 GTC 主题演讲,探索会议。
主题图片由 Apple 和 Kia 提供。