面向智慧城市 AI 的 NVIDIA Omniverse Blueprint 集成了 NVIDIA Omniverse、Cosmos、NeMo 和 Metropolis，已被多家領(lǐng)先的獨(dú)立軟件供應(yīng)商 (ISV) 合作伙伴采用，以提升歐洲城市的可持續(xù)發(fā)展水平與居民生活質(zhì)量。

預(yù)計(jì)到 2050 年，城市人口將翻一番，這意味著到本世紀(jì)中期，全球的城市人口可能會(huì)增加約 25 億，這對(duì)可持續(xù)的城市規(guī)劃和公共服務(wù)提出了更高的要求。全球各地的城市正在使用數(shù)字孿生和 AI 智能體，以進(jìn)行城市規(guī)劃場(chǎng)景分析和數(shù)據(jù)驅(qū)動(dòng)的運(yùn)營(yíng)決策。

然而，構(gòu)建城市的數(shù)字孿生并在其中測(cè)試智慧城市 AI 智能體，是一項(xiàng)復(fù)雜且資源密集型的艱巨任務(wù)，面臨著技術(shù)和運(yùn)營(yíng)方面的諸多挑戰(zhàn)。

為應(yīng)對(duì)這些挑戰(zhàn)，NVIDIA 宣布推出面向智慧城市 AI 的NVIDIA Omniverse Blueprint，這一參考框架集成了NVIDIA Omniverse、Cosmos、NeMo和Metropolis平臺(tái)，旨在將物理 AI 的優(yōu)勢(shì)覆蓋至整座城市及其關(guān)鍵基礎(chǔ)設(shè)施。

借助該藍(lán)圖，開發(fā)人員可以構(gòu)建仿真就緒型 (SimReady) 的逼真的城市數(shù)字孿生，以構(gòu)建和測(cè)試 AI 智能體，用于監(jiān)控和優(yōu)化城市運(yùn)營(yíng)。

首批采用這一藍(lán)圖的公司包括 XXII、AVES Reality、Akila、Blyncsy、Bentley、Cesium、K2K、Linker Vision、Milestone Systems、Nebius、SNCF Gares&Connexions、Trimble 以及 Younite AI 等領(lǐng)先企業(yè)。

面向智慧城市 AI 的 NVIDIA Omniverse Blueprint

面向智慧城市 AI 的 NVIDIA Omniverse Blueprint 提供了完整的軟件堆棧，可加速在物理精確的城市數(shù)字孿生中開發(fā)和測(cè)試 AI 智能體。該軟件棧包括：

NVIDIA Omniverse：用于構(gòu)建物理精確的數(shù)字孿生，并在城市規(guī)模上運(yùn)行仿真。

NVIDIA Cosmos：用于生成大規(guī)模合成數(shù)據(jù)，用于 AI 模型的后訓(xùn)練。

NVIDIA NeMo：用于整理高質(zhì)量數(shù)據(jù)，并利用這些數(shù)據(jù)訓(xùn)練和微調(diào)視覺語(yǔ)言模型 (VLM) 和大語(yǔ)言模型。

NVIDIA Metropolis：基于用于視頻搜索和總結(jié)的NVIDIA AI Blueprint (VSS)開發(fā)及部署 AI 智能體，以處理大量視頻數(shù)據(jù)，并為優(yōu)化業(yè)務(wù)流程提供重要見解。

該藍(lán)圖的工作流包括三個(gè)關(guān)鍵步驟。首先，開發(fā)者使用 Omniverse 和 Cosmos，利用航拍、衛(wèi)星或地圖數(shù)據(jù)創(chuàng)建地點(diǎn)和設(shè)施的 SimReady 數(shù)字孿生。接下來(lái)，使用NVIDIA TAO工具套件和 NeMo Curator 訓(xùn)練和微調(diào) AI 模型，如計(jì)算機(jī)視覺模型和 VLM，以提高視覺 AI 用例的準(zhǔn)確性。最后，部署這些定制模型驅(qū)動(dòng)的實(shí)時(shí) AI 智能體，使用 Metropolis VSS Blueprint 對(duì)攝像頭和傳感器的數(shù)據(jù)進(jìn)行警報(bào)、總結(jié)和查詢。

NVIDIA 合作伙伴生態(tài)系統(tǒng)助力全球智慧城市

面向智慧城市 AI 的藍(lán)圖使龐大的合作伙伴生態(tài)系統(tǒng)能夠結(jié)合 NVIDIA 和他們自身的技術(shù)，使用單一工作流構(gòu)建和激活適用于智慧城市場(chǎng)景的數(shù)字孿生。

SNCF Gares&Connexions 運(yùn)營(yíng)著覆蓋法國(guó)和摩納哥的 3,000 個(gè)火車站網(wǎng)絡(luò)，已經(jīng)部署數(shù)字孿生和 AI 智能體，以實(shí)現(xiàn)實(shí)時(shí)運(yùn)營(yíng)管理、應(yīng)急響應(yīng)的仿真和基礎(chǔ)設(shè)施升級(jí)規(guī)劃。

這有助于每個(gè)車站分析運(yùn)營(yíng)數(shù)據(jù)，如能源和水的使用，并啟用預(yù)測(cè)性維護(hù)能力、自動(dòng)化報(bào)告以及符合 GDPR 的視頻分析，用于突發(fā)事件檢測(cè)和人群管理。

由 Omniverse、Metropolis 以及生態(tài)系統(tǒng)合作伙伴 Akila 和 XXII 提供支持，SNCF Gares&Connexions 在摩納哥-蒙特卡洛火車站和馬賽火車站部署了物理 AI，實(shí)現(xiàn)了 100% 的預(yù)測(cè)性維護(hù)成功率，減少 50% 的停運(yùn)時(shí)間和問(wèn)題響應(yīng)時(shí)間，以及減少 20% 的能源消耗。

西西里島的巴勒莫市正在使用其合作伙伴 K2K 提供的數(shù)字孿生和 AI 智能體改善公共衛(wèi)生和安全，幫助城市運(yùn)營(yíng)機(jī)構(gòu)處理和分析來(lái)自超過(guò) 1,000 個(gè)公共視頻流的畫面，每秒能處理接近 500 億像素。

受西西里島委托，基于 NVIDIA VSS AI Blueprint 和 Nebius 的云解決方案構(gòu)建的 K2K AI 智能體，可以分析視頻數(shù)據(jù)并做出響應(yīng)，為公共事件提供實(shí)時(shí)警報(bào)。

為了準(zhǔn)確預(yù)測(cè)和解決交通事件，K2K 正在使用 Cosmos 世界基礎(chǔ)模型生成合成數(shù)據(jù)，對(duì)不同的駕駛條件進(jìn)行仿真。然后，K2K 使用這些數(shù)據(jù)，通過(guò) NeMo Curator 微調(diào)支持 AI 智能體的 VLM。這些仿真使 K2K 的 AI 智能體能夠每秒生成超過(guò) 100,000 次預(yù)測(cè)。

Milestone Systems 與 NVIDIA 和歐洲城市合作啟動(dòng) Hafnia 項(xiàng)目，旨在為城市構(gòu)建匿名化、符合道德的視頻數(shù)據(jù)平臺(tái)，以開發(fā)和訓(xùn)練 AI 模型及應(yīng)用，同時(shí)維持合規(guī)性。

使用在NVIDIA DGX Cloud上運(yùn)行的 Cosmos 和 NeMo Curator，以及 Nebius 的云基礎(chǔ)設(shè)施，Hafnia 項(xiàng)目得以實(shí)現(xiàn)規(guī)?；?，并支持符合歐洲法規(guī)的以視頻為中心的 AI 模型（包括適用于各種智慧城市場(chǎng)景的 VLM）的訓(xùn)練與微調(diào)。

該項(xiàng)目將初步在意大利熱那亞進(jìn)行推廣，這里是全球首批應(yīng)用智能交通系統(tǒng) VLM 模型的城市之一。

Linker Vision 是首批與 NVIDIA 合作的企業(yè)之一，在臺(tái)灣高雄市部署由 Omniverse、Cosmos 和 Metropolis 提供支持的智慧城市數(shù)字孿生和 AI 智能體。Linker Vision 與專注于數(shù)字孿生的公司 AVES Reality 合作，將城市與基礎(chǔ)設(shè)施的航拍影像轉(zhuǎn)化為 3D 幾何圖形，并最終構(gòu)建 SimReady 的 Omniverse 數(shù)字孿生。

Linker Vision 隨后使用 AI 驅(qū)動(dòng)的應(yīng)用，在數(shù)字孿生中構(gòu)建、訓(xùn)練和測(cè)試視覺 AI 智能體，并最終部署在物理城市中。Linker Vision 正使用生成式 AI 擴(kuò)展能力，能夠支持實(shí)時(shí)分析 50,000 個(gè)視頻流，以理解并描述如洪水和交通事故等復(fù)雜的城市事件。如今，Linker Vision 已經(jīng)能夠通過(guò)單一集成 AI 平臺(tái)向十余個(gè)城市部門提供及時(shí)的洞察，打破數(shù)據(jù)孤島，并將事件的響應(yīng)時(shí)間縮短了高達(dá) 80%。

Bentley Systems 正在借助 NVIDIA 藍(lán)圖，將物理 AI 引入城市。開放的 3D 地理空間平臺(tái) Cesium 為 Omniverse 提供可視化、分析和管理基礎(chǔ)設(shè)施項(xiàng)目及港口數(shù)字孿生的基礎(chǔ)。該公司的 AI 平臺(tái) Blyncsy，利用合成數(shù)據(jù)生成與 Metropolis 技術(shù)分析道路狀況并優(yōu)化維護(hù)。

為建筑、地理空間和交通等關(guān)鍵行業(yè)提供支持的全球技術(shù)公司 Trimble，正在探索將 Omniverse 藍(lán)圖的組件集成至其實(shí)景捕獲的工作流以及 Trimble Connect 數(shù)字孿生平臺(tái)中，用于智慧城市測(cè)量和制圖應(yīng)用。

AI 和 3D 數(shù)字孿生解決方案提供商 Younite AI，正在采用該藍(lán)圖加速其開發(fā)流程，使公司能夠快速?gòu)倪\(yùn)營(yíng)數(shù)字孿生邁向大規(guī)模城市仿真，改善合成數(shù)據(jù)生成，整合實(shí)時(shí)物聯(lián)網(wǎng)傳感器數(shù)據(jù)，并部署 AI 智能體。