面向智慧城市 AI 的 NVIDIA Omniverse Blueprint 集成了 NVIDIA Omniverse、Cosmos、NeMo 和 Metropolis，已被多家領(lǐng)先的獨立軟件供應(yīng)商 (ISV) 合作伙伴采用，以提升歐洲城市的可持續(xù)發(fā)展水平與居民生活質(zhì)量。

預(yù)計到 2050 年，城市人口將翻一番，這意味著到本世紀(jì)中期，全球的城市人口可能會增加約 25 億，這對可持續(xù)的城市規(guī)劃和公共服務(wù)提出了更高的要求。全球各地的城市正在使用數(shù)字孿生和 AI 智能體，以進(jìn)行城市規(guī)劃場景分析和數(shù)據(jù)驅(qū)動的運營決策。

然而，構(gòu)建城市的數(shù)字孿生并在其中測試智慧城市 AI 智能體，是一項復(fù)雜且資源密集型的艱巨任務(wù)，面臨著技術(shù)和運營方面的諸多挑戰(zhàn)。

為應(yīng)對這些挑戰(zhàn)，NVIDIA 宣布推出面向智慧城市 AI 的NVIDIA Omniverse Blueprint，這一參考框架集成了NVIDIA Omniverse、Cosmos、NeMo和Metropolis平臺，旨在將物理 AI 的優(yōu)勢覆蓋至整座城市及其關(guān)鍵基礎(chǔ)設(shè)施。

借助該藍(lán)圖，開發(fā)人員可以構(gòu)建仿真就緒型 (SimReady) 的逼真的城市數(shù)字孿生，以構(gòu)建和測試 AI 智能體，用于監(jiān)控和優(yōu)化城市運營。

首批采用這一藍(lán)圖的公司包括 XXII、AVES Reality、Akila、Blyncsy、Bentley、Cesium、K2K、Linker Vision、Milestone Systems、Nebius、SNCF Gares&Connexions、Trimble 以及 Younite AI 等領(lǐng)先企業(yè)。

面向智慧城市 AI 的 NVIDIA Omniverse Blueprint

面向智慧城市 AI 的 NVIDIA Omniverse Blueprint 提供了完整的軟件堆棧，可加速在物理精確的城市數(shù)字孿生中開發(fā)和測試 AI 智能體。該軟件棧包括：

NVIDIA Omniverse：用于構(gòu)建物理精確的數(shù)字孿生，并在城市規(guī)模上運行仿真。

NVIDIA Cosmos：用于生成大規(guī)模合成數(shù)據(jù)，用于 AI 模型的后訓(xùn)練。

NVIDIA NeMo：用于整理高質(zhì)量數(shù)據(jù)，并利用這些數(shù)據(jù)訓(xùn)練和微調(diào)視覺語言模型 (VLM) 和大語言模型。

NVIDIA Metropolis：基于用于視頻搜索和總結(jié)的NVIDIA AI Blueprint (VSS)開發(fā)及部署 AI 智能體，以處理大量視頻數(shù)據(jù)，并為優(yōu)化業(yè)務(wù)流程提供重要見解。

該藍(lán)圖的工作流包括三個關(guān)鍵步驟。首先，開發(fā)者使用 Omniverse 和 Cosmos，利用航拍、衛(wèi)星或地圖數(shù)據(jù)創(chuàng)建地點和設(shè)施的 SimReady 數(shù)字孿生。接下來，使用NVIDIA TAO工具套件和 NeMo Curator 訓(xùn)練和微調(diào) AI 模型，如計算機(jī)視覺模型和 VLM，以提高視覺 AI 用例的準(zhǔn)確性。最后，部署這些定制模型驅(qū)動的實時 AI 智能體，使用 Metropolis VSS Blueprint 對攝像頭和傳感器的數(shù)據(jù)進(jìn)行警報、總結(jié)和查詢。

NVIDIA 合作伙伴生態(tài)系統(tǒng)助力全球智慧城市

面向智慧城市 AI 的藍(lán)圖使龐大的合作伙伴生態(tài)系統(tǒng)能夠結(jié)合 NVIDIA 和他們自身的技術(shù)，使用單一工作流構(gòu)建和激活適用于智慧城市場景的數(shù)字孿生。

SNCF Gares&Connexions 運營著覆蓋法國和摩納哥的 3,000 個火車站網(wǎng)絡(luò)，已經(jīng)部署數(shù)字孿生和 AI 智能體，以實現(xiàn)實時運營管理、應(yīng)急響應(yīng)的仿真和基礎(chǔ)設(shè)施升級規(guī)劃。

這有助于每個車站分析運營數(shù)據(jù)，如能源和水的使用，并啟用預(yù)測性維護(hù)能力、自動化報告以及符合 GDPR 的視頻分析，用于突發(fā)事件檢測和人群管理。

由 Omniverse、Metropolis 以及生態(tài)系統(tǒng)合作伙伴 Akila 和 XXII 提供支持，SNCF Gares&Connexions 在摩納哥-蒙特卡洛火車站和馬賽火車站部署了物理 AI，實現(xiàn)了 100% 的預(yù)測性維護(hù)成功率，減少 50% 的停運時間和問題響應(yīng)時間，以及減少 20% 的能源消耗。

西西里島的巴勒莫市正在使用其合作伙伴 K2K 提供的數(shù)字孿生和 AI 智能體改善公共衛(wèi)生和安全，幫助城市運營機(jī)構(gòu)處理和分析來自超過 1,000 個公共視頻流的畫面，每秒能處理接近 500 億像素。

受西西里島委托，基于 NVIDIA VSS AI Blueprint 和 Nebius 的云解決方案構(gòu)建的 K2K AI 智能體，可以分析視頻數(shù)據(jù)并做出響應(yīng)，為公共事件提供實時警報。

為了準(zhǔn)確預(yù)測和解決交通事件，K2K 正在使用 Cosmos 世界基礎(chǔ)模型生成合成數(shù)據(jù)，對不同的駕駛條件進(jìn)行仿真。然后，K2K 使用這些數(shù)據(jù)，通過 NeMo Curator 微調(diào)支持 AI 智能體的 VLM。這些仿真使 K2K 的 AI 智能體能夠每秒生成超過 100,000 次預(yù)測。

Milestone Systems 與 NVIDIA 和歐洲城市合作啟動 Hafnia 項目，旨在為城市構(gòu)建匿名化、符合道德的視頻數(shù)據(jù)平臺，以開發(fā)和訓(xùn)練 AI 模型及應(yīng)用，同時維持合規(guī)性。

使用在NVIDIA DGX Cloud上運行的 Cosmos 和 NeMo Curator，以及 Nebius 的云基礎(chǔ)設(shè)施，Hafnia 項目得以實現(xiàn)規(guī)模化，并支持符合歐洲法規(guī)的以視頻為中心的 AI 模型（包括適用于各種智慧城市場景的 VLM）的訓(xùn)練與微調(diào)。

該項目將初步在意大利熱那亞進(jìn)行推廣，這里是全球首批應(yīng)用智能交通系統(tǒng) VLM 模型的城市之一。

Linker Vision 是首批與 NVIDIA 合作的企業(yè)之一，在臺灣高雄市部署由 Omniverse、Cosmos 和 Metropolis 提供支持的智慧城市數(shù)字孿生和 AI 智能體。Linker Vision 與專注于數(shù)字孿生的公司 AVES Reality 合作，將城市與基礎(chǔ)設(shè)施的航拍影像轉(zhuǎn)化為 3D 幾何圖形，并最終構(gòu)建 SimReady 的 Omniverse 數(shù)字孿生。

Linker Vision 隨后使用 AI 驅(qū)動的應(yīng)用，在數(shù)字孿生中構(gòu)建、訓(xùn)練和測試視覺 AI 智能體，并最終部署在物理城市中。Linker Vision 正使用生成式 AI 擴(kuò)展能力，能夠支持實時分析 50,000 個視頻流，以理解并描述如洪水和交通事故等復(fù)雜的城市事件。如今，Linker Vision 已經(jīng)能夠通過單一集成 AI 平臺向十余個城市部門提供及時的洞察，打破數(shù)據(jù)孤島，并將事件的響應(yīng)時間縮短了高達(dá) 80%。

Bentley Systems 正在借助 NVIDIA 藍(lán)圖，將物理 AI 引入城市。開放的 3D 地理空間平臺 Cesium 為 Omniverse 提供可視化、分析和管理基礎(chǔ)設(shè)施項目及港口數(shù)字孿生的基礎(chǔ)。該公司的 AI 平臺 Blyncsy，利用合成數(shù)據(jù)生成與 Metropolis 技術(shù)分析道路狀況并優(yōu)化維護(hù)。

為建筑、地理空間和交通等關(guān)鍵行業(yè)提供支持的全球技術(shù)公司 Trimble，正在探索將 Omniverse 藍(lán)圖的組件集成至其實景捕獲的工作流以及 Trimble Connect 數(shù)字孿生平臺中，用于智慧城市測量和制圖應(yīng)用。

AI 和 3D 數(shù)字孿生解決方案提供商 Younite AI，正在采用該藍(lán)圖加速其開發(fā)流程，使公司能夠快速從運營數(shù)字孿生邁向大規(guī)模城市仿真，改善合成數(shù)據(jù)生成，整合實時物聯(lián)網(wǎng)傳感器數(shù)據(jù)，并部署 AI 智能體。