2050년까지 도시 인구는 두 배 증가할 것으로 예상되는데요. 이는 21세기 중반까지 도시 지역에 약 25억 명의 인구가 더해질 수 있음을 의미하죠. 따라서 보다 지속 가능한 도시 계획과 공공 서비스의 필요성이 높아지고 있습니다. 전 세계 도시들은 도시 계획 시나리오 분석과 데이터 기반 운영 결정을 위해 디지털 트윈과 AI 에이전트를 활용하고 있습니다.
그러나 도시의 디지털 트윈을 구축하고 그 안에서 스마트 시티 AI 에이전트를 테스트하는 것은 복잡하고, 자원 집약적인 작업입니다. 여기에는 기술적, 운영적 문제도 수반되죠.
이러한 문제를 해결하기 위해 스마트 시티 AI용 NVIDIA Omniverse Blueprint를 공개합니다. 이 참조 프레임워크는 NVIDIA Omniverse, Cosmos, NeMo, Metropolis 플랫폼과 결합해 도시 전체와 주요 인프라에 물리 AI의 이점을 제공합니다.
개발자는 이 Blueprint를 사용해 SimReady와 같이 시뮬레이션이 가능한 극사실적 도시 디지털 트윈을 구축할 수 있는데요. 도시 운영을 모니터링하고 최적화하는 AI 에이전트를 개발, 테스트할 수 있습니다.
이 새로운 Blueprint를 최초로 활용하게 될 주요 기업에는 XXII, AVES 리얼리티(AVES Reality), 아킬라(Akila), 블링시(Blyncsy), 벤틀리(Bentley), 세슘(Cesium), K2K, 링커 비전(Linker Vision), 마일스톤 시스템즈(Milestone Systems), 네비우스(Nebius), 프랑스 국영철도회사(SNCF Gares&Connexions), 트림블(Trimble), 유나이트 AI(Younite AI) 등이 있습니다.
스마트 시티 AI를 위한 NVIDIA Omniverse Blueprint
스마트 시티 AI용 NVIDIA Omniverse Blueprint는 완전한 소프트웨어 스택을 제공해, 물리적으로 정밀한 도시의 디지털 트윈에서 AI 에이전트의 개발, 테스트를 가속화합니다. 다음과 같은 지원 사항이 포함됩니다.
- NVIDIA Omniverse: 물리적으로 정확한 디지털 트윈을 구축해 도시 규모에서 시뮬레이션을 실행합니다.
- NVIDIA Cosmos: 사후 훈련 AI 모델을 위한 대규모 합성 데이터를 생성합니다.
- NVIDIA NeMo: 고품질 데이터를 큐레이션하며, 해당 데이터를 사용해 비전 언어 모델(vision language model, VLM)과 거대 언어 모델(LLM)을 훈련하고 미세 조정합니다.
- NVIDIA Metropolis: 영상 검색과 요약(video search and summarization, VSS)용 NVIDIA AI Blueprint를 기반으로 영상 분석 AI 에이전트를 구축, 배포합니다. 이를 통해 방대한 양의 영상 데이터를 처리하고, 비즈니스 프로세스를 최적화하는 데 중요한 인사이트를 제공하죠.
이 Blueprint 워크플로우는 세 개의 주요 단계로 구성됩니다. 먼저 개발자는 Omniverse와 Cosmos를 통해 특정 위치와 시설의 SimReady 디지털 트윈을 구축하는데요. 여기에는 항공, 위성, 지도 데이터가 활용됩니다. 이어서 NVIDIA TAO와 NeMo Curator를 사용해 컴퓨터 비전 모델, VLM 등 AI 모델을 훈련하고 미세 조정한죠. 이렇게 비전 AI 사용 사례에서 정확도를 높이는 것입니다. 마지막으로 이러한 맞춤형 모델에 기반한 실시간 AI 에이전트의 배포로 Metropolis VSS Blueprint를 사용해 카메라와 센서 데이터를 알림, 요약, 쿼리합니다.
NVIDIA 파트너 생태계, 전 세계 스마트 시티 지원
스마트 시티 AI용 Blueprint는 다양한 파트너들이 NVIDIA의 기술과 자사의 기술을 결합합니다. 그리고 하나의 통합된 워크플로우로 스마트 시티 사용 사례를 위한 디지털 트윈을 구축, 활성화할 수 있습니다.
프랑스 국영철도회사는 프랑스, 모나코에서 3,000개의 기차역 네트워크를 운영하는데요. 이들은 실시간 운영 모니터링, 비상 대응 시뮬레이션, 인프라 업그레이드 계획을 추진하기 위해 디지털 트윈과 AI 에이전트를 배포했습니다.
이는 각 역의 에너지, 물 사용 등 운영 데이터를 분석하고, 예측 유지보수 기능, 자동 보고 기능, 사고 감지와 군중 관리를 위한 GDPR 준수 영상 분석을 지원합니다.
프랑스 국영철도회사는 Omniverse, Metropolise와 생태계 파트너인 아킬라, XXII의 솔루션에 기반으로 모나코-몬테-카를로(Monaco-Monte-Carlo), 마르세유(Marseilles) 역에 물리 AI를 배포했습니다. 이를 통해 예방 정비 완수율 100%, 다운 타임과 문제 해결 시간 50% 단축, 에너지 소비 20% 절감이라는 성과를 달성했죠.
시칠리아(Sicily)의 팔레르모(Palermo) 시는 파트너사 K2K의 AI 에이전트와 디지털 트윈을 사용해 공공 보건과 안전을 개선하고 있습니다. 시 당국이 1,000개 이상의 공공 영상 스트림에서 초당 약 500억 픽셀의 속도로 영상을 처리하고 분석할 수 있도록 지원하죠.
시칠리아에서 도입된 K2K의 AI 에이전트는 VSS용 NVIDIA AI Blueprint와 네비우스의 클라우드 솔루션을 기반으로 구축됐는데요. 영상 데이터를 해석하며, 이를 바탕으로 공공에서 벌어지는 사건사고에 대한 실시간 알림을 제공합니다.
K2K는 교통 사고를 정확하게 예측하고 해결하기 위해 Cosmos 월드 파운데이션 모델(WFM)을 활용한 합성 데이터를 생성하고 있습니다. 다양한 주행 조건을 시뮬레이션하는 이 합성 데이터를 통해, K2K는 NeMo Curator로 AI 에이전트를 지원하는 VLM을 미세 조정하죠. 이러한 시뮬레이션은 K2K의 AI 에이전트가 초당 10만 개 이상의 예측을 생성하도록 합니다.
마일스톤 시스템즈는 NVIDIA와 유럽 각 도시들과 협력해 프로젝트 하프니아(Project Hafnia)를 시작했습니다. 이 프로젝트는 도시들이 규제를 준수하면서도 AI 모델과 애플리케이션을 개발하고 훈련시킬 수 있도록, 익명화되고 윤리적으로 수집된 영상 데이터 플랫폼을 구축하는 것을 목표로 하고 있죠.
프로젝트 하프니아는 NVIDIA DGX Cloud에 탑재된 Cosmos와 NeMo Curator, 그리고 네비우스의 소버린 유럽 클라우드 인프라를 기반으로 합니다. 이를 통해 유럽 현지 기준을 준수하는 VLM 등 영상 중심 AI 모델의 훈련과 미세 조정을 지원하죠. 다양한 스마트 시티 사용 사례에 적용될 수 있습니다.
이탈리아 제노바(Genoa)에서 진행되는 이 프로젝트의 초기 출시 버전에는 세계 최초의 지능형 교통 시스템용 VLM 모델이 탑재됐습니다.
링커 비전은 NVIDIA와 협력한 최초의 파트너사 중 한 곳인데요. 이들은 대만 가오슝(Kaohsiung) 시에서 Omniverse, Cosmos, Metropolis로 구동되는 스마트 시티 디지털 트윈과 AI 에이전트를 도입하죠. 링커 비전은 디지털 트윈 업체인 AVES 리얼리티와 함께 도시, 인프라의 항공 이미지를 기하학적 3D 구조로 변환했으며, 궁극적으로 SimReady Omniverse 디지털 트윈으로 구현했습니다.
실제 도시에 배포되기에 앞서, 링커 비전의 AI 기반 애플리케이션은 디지털 트윈에서 시각 AI 에이전트를 구축하고 훈련하며 테스트했습니다. 생성형 AI를 통해 확장 중인 이 시스템은 5만 개의 영상 스트림을 실시간으로 분석해 홍수, 교통 사고 등 도시에서 일어나는 복잡한 사건을 이해하고 설명할 수 있는데요. 링커 비전은 하나로 통합된 AI 기반 플랫폼으로 당국의 여러 부서에 시기적절한 인사이트를 제공합니다. 이를 통해 부서 간 장벽을 허물고 사고 대응 시간을 최대 80% 단축하죠.
벤틀리 시스템즈는 NVIDIA Blueprint와 함께 물리 AI를 도시에 도입하는 데 동참하고 있습니다. 개방형 3D 지리 공간 플랫폼인 세슘은 인프라 프로젝트와 항만의 디지털 트윈을 Omniverse에서 시각화, 분석, 관리하는 기반을 제공하죠. 벤틀리 시스템즈의 AI 플랫폼인 블린시는 합성 데이터 생성과 Metropolis를 사용해 도로 조건을 분석하고 유지보수를 개선합니다.
트림블은 건설, 지리 공간, 운송 등 필수 산업을 지원하는 글로벌 기술 회사인데요. 이들은 스마트 시티의 측량, 지도 제작 애플리케이션을 위한 현실 캡처 워크플로우와 트림블 커넥트(Connect) 디지털 트윈 플랫폼에 Omniverse Blueprint의 구성 요소를 통합하는 방법을 모색하고 있습니다.
AI, 3D 디지털 트윈 솔루션 개발업체인 유나이트 AI는 개발 파이프라인을 가속화하기 위해 NVIDIA Blueprint를 채택했죠. 이를 통해 운영 중인 디지털 트윈을 대규모 도시 시뮬레이션으로 빠르게 전환하고 합성 데이터 생성을 개선하는 한편, 실시간 IoT 센서 데이터를 통합하며 AI 에이전트를 배포하고 있습니다.
GTC Paris 세션에 참석하거나 온디맨드 영상을 시청해 스마트 시티 AI를 위한 NVIDIA Omniverse Blueprint에 대해 자세히 알아보세요. Blueprint의 최신 정보 알림을 신청할 수도 있습니다.
NVIDIA 창립자 겸 CEO 젠슨 황의 NVIDIA GTC Paris 키노르를 시청하고, VivaTech 2025에서 개최되는 GTC Paris 세션을 확인하세요.