本文是洞悉 Omniverse 系列文章。“洞悉 Omniverse”重点介绍开发者、3D 从业者与企业如何使用 OpenUSD 和 NVIDIA Omniverse 的最新进展深入改变他们的工作流。
全球城市面临着前所未有的挑战:城市人口激增,基础设施却难以跟上增长的步伐。
交通拥堵和协调应急服务等运营难题被碎片化的数据工作流、独立的地方流程以及系统不统一等问题而变得更加复杂。技术障碍使得城市无法获取有效决策和城市管理所需的全面、实时的洞察信息。
领先的城市和技术伙伴正在部署用于智慧城市 AI 的 NVIDIA Blueprint,这是一个参考应用程序,提供了构建、测试和操作 AI 智能体的完整软件堆栈,用于仿真就绪 (SimReady) 的数字孪生。
OpenUSD 是一个开放且可扩展的框架,连接到这一物理 AI 工作流的每个阶段。启用 OpenUSD 的数字孪生作为 SimReady 环境,城市可以在其中模拟“假设”场景并生成物理准确的传感器数据。
该蓝图推动了三个阶段的工作流:1) 使用 NVIDIA Cosmos 平台和 NVIDIA Omniverse 库进行仿真以生成合成数据;2) 训练和微调视觉 AI 模型;3) 使用 NVIDIA Metropolis 平台和用于视频搜索与摘要 (VSS) 的 NVIDIA Blueprint 部署实时视频分析 AI 智能体。这些使得城市能够从被动运营转向主动运营。
基于这些仿真,城市可部署集天气数据、交通传感器和应急响应系统于一体的运营平台,支持对罕见场景的快速测试、实时监测、城市基础设施规划以及城市系统的优化。
从高雄市通过街道级 AI 将事件响应时间缩短 80%,到北卡罗来纳州罗利市实现 95% 的车辆检测准确率,再到法国铁路网络将能耗优化 20%,全球各地城市正通过数字孪生与 AI 智能体大规模变革城市运营。
智慧城市在行动
Akila 与 SNCF Gares&Connexions 利用数字孪生改善铁路运营
Akila 的数字孪生应用程序帮助法国铁路运营商 SNCF Gares&Connexions 优化其每日近 14,000 列火车的网络运行,通过实时场景规划实现太阳能供暖、气流管理及人群流动调控。基于 OpenUSD 的数字孪生帮助降低了 20% 的能耗、实现 100% 的准时预防性维护,并将停机时间与响应时效缩短了 50%。
Linker Vision 的物理 AI 系统可识别高雄市内的基础设施事件,包括损坏的路灯和倒下的树木,从而减少人工城市巡检需求并加速应急响应。为了将其街道级智能扩展到更多城市,Linker Vision 使用 Omniverse 库进行模拟,运用 Cosmos Reason 进行世界理解,并通过 OpenUSD 提供支持的 VSS 蓝图进行部署。
Esri 和 Microsoft 在罗利市实现全面城市智能
罗利市使用 NVIDIA DeepStream 软件开发工具包实现 95%的车辆检测准确率,提升了工程师的交通分析工作效率。这些数据强化了由 Esri ArcGIS 地理空间平台构建的罗利市数字孪生,为关键基础设施规划与管理提供可视化分析支持。通过将计算机视觉管线与基于 NVIDIA VSS 蓝图的视觉 AI 智能体集成,该系统在 Azure 云端的 ArcGIS 平台上实现了全面的实时可视化与深度洞察。
Milestone Systems 的 VLM 可实现视频审查自动化
Milestone Systems 即将推出其 Hafnia VLM,它将包括适用于视频管理软件 XProtect 的 VLM 插件以及 VLM 即服务。Hafnia VLM 基于 75,000 小时以上的视频数据微调,通过自动化视频审查并过滤误报,可将操作员警报疲劳度降低高达 30%。它由 NVIDIA Cosmos Reason VLM 和 Metropolis 开发。XProtect 的 Hafnia VLM 插件将使 XProtect 操作员和用户更容易访问生成式 AI。
K2K 的平台使用 NVIDIA Cosmos Reason 和 VSS 蓝图分析意大利巴勒莫市的 1,000 多个视频流,每年处理 70 亿起事件。当提取并分析出关键状况时,系统将通过自然语言查询与视频事件自动通知市政官员。
观看 NVIDIA GTC on-demand 会议“Leadership Strategies to Transform Public Services”,了解城市如何通过仿真、视觉 AI 和数字孪生进行转变。
开始使用智慧城市 AI
通过以下资源了解有关 OpenUSD 和计算机视觉工作流的更多信息:
- 观看视频,了解如何通过 NVIDIA 智慧城市 AI 蓝图将物理 AI 带入城市。
- 阅读技术博客,了解如何通过 VSS 蓝图将计算机视觉管线与生成式 AI 及推理技术进行集成。
- 访问全新的指南手册,了解 NVIDIA Cosmos Predict、NVIDIA Cosmos Transfer 和 NVIDIA Cosmos Reason 的智能交通系统工作流与技术方案。
