NVIDIA가 NVIDIA Isaac™ 오픈 로보틱스 개발 플랫폼을 대폭 확장한다고 발표했습니다. 이번 확장에는 휴머노이드 레퍼런스 플랫폼과 데이터셋, 런타임 추가, 로봇 학습 프레임워크 업데이트가 포함됩니다.
이러한 기술은 개발자에게 데이터부터 배포까지 이어지는 통합 개발 경로를 제공해 범용 로봇의 실제 환경 도입을 가속화합니다.
NVIDIA 젠슨 황 CEO는 “범용 로보틱스는 놀라운 속도로 발전 중이며, 로보틱스 분야의 ChatGPT 시대가 빠르게 다가오고 있습니다. NVIDIA는 풀스택 오픈 로보틱스 플랫폼인 NVIDIA Isaac을 통해 개발자에게 모델, 데이터, 시뮬레이션 도구, 컴퓨팅 시스템을 제공함으로써 세계 주요 산업 전반에 피지컬 AI를 구현할 수 있도록 지원하고 있죠”라고 말했습니다.
Agile ONE SN, 차세대 휴머노이드 연구 위한 레퍼런스 플랫폼
Agile Robots은 NVIDIA Isaac GR00T이 사전 구성되고 NVIDIA Jetson Thor™ 엣지 AI 플랫폼으로 구동되는 풀스택 휴머노이드 레퍼런스 플랫폼 Agile ONE SN을 발표했습니다.
로보틱스 연구자와 개발자들은 로봇 기술을 개발 단계에서 실제 환경으로 구현하는 데 필요한 시뮬레이션, 학습, 배포 도구를 개별적으로 통합해야 하는 어려움을 겪는 경우가 많은데요. Agile ONE SN은 이러한 도구와 워크플로우를 단일 플랫폼으로 통합해 기존 몇 주가 소요되던 설정 시간을 단 며칠로 단축합니다.
Agile ONE SN의 주요 특징은 다음과 같습니다.
- Agile ONE S 휴머노이드 본체: 높이4m, 무게 40kg으로 31개의 자유도(DoF)를 갖추고 있으며 팔당 3kg의 적재 하중을 처리할 수 있습니다.
- Dual WUJI Hand 2 5지 손: 각 손은 20개의 자유도와 1kHz 힘 제어, 촉각 감지 기능을 제공해 정교한 조작을 지원합니다.
- NVIDIA Jetson Thor 온보드 컴퓨팅: 2,070 FP4 테라플롭스의 연산 성능과 128GB의 통합 메모리를 제공해 온보드 추론 및 실시간 제어를 지원합니다.
- 멀티모달 센싱: 머리와 손목 카메라, 라이다 센서, 관성측정장치 등을 통해 로봇이 주변 환경을 인식하고 상호작용할 수 있도록 지원합니다.
- NVIDIA Isaac GR00T 플랫폼: GR00T 파운데이션 모델, 데이터 수집부터 배포에 이르는 전체 워크플로우, 전신의 조화로운 움직임을 위한 제어 기능을 포함합니다.
- 안전 기능: 로봇에 탑재된 안전 프로토콜과 NVIDIA Halos 로보틱스용 풀스택 안전 시스템을 통합할 계획입니다.
Agile Robots 창립자 겸 CEO Zhaopeng Chen은 “휴머노이드 기술의 획기적인 발전은 대규모 환경에서의 실용성에 있습니다. 하나의 적응형 로봇이 다양한 기술을 학습하고 사람을 위해 설계된 여러 환경에서 작동할 수 있어야 하죠. Agile Robots은 NVIDIA Isaac GR00T 기반에 Jetson Thor로 구동되는 풀스택 개방형 레퍼런스 휴머노이드 Agile ONE SN을 공개했습니다. 이를 통해 개발자는 휴머노이드를 실제 작업에 투입하는 데 필요한 역량을 개발하고 학습, 검증할 수 있는 완성형 시스템을 활용할 수 있습니다”라고 전했습니다.
Agile ONE SN은 2027년 초 출시 예정이며, 첨단 휴머노이드 연구개발을 지원하도록 설계됐습니다. 스탠퍼드대학교(Stanford University)와 취리히 연방공과대학교(ETH Zurich) 등 유수의 기관들도 관심을 보이고 있습니다.
새로운 NVIDIA 기술로 데이터부터 배포까지 로봇 학습 가속화
NVIDIA의 새로운 기술은 개발자가 학습 데이터를 생성하고, 로봇 학습을 확장하며, 시뮬레이션 환경을 구축하고, 로봇 애플리케이션을 배포할 수 있도록 지원합니다. 이를 통해 솔루션 구현까지 걸리는 시간을 단축할 수 있습니다.
- SimReady Central Library: 시뮬레이션에 바로 활용할 수 있는 2,000개 이상의 로봇 및 공장 자료를 제공합니다. Human 1M Dataset은 다양한 인간 활동, 동기화된 3개 시점 영상, 3D 손 추적 데이터를 포함합니다. 두 리소스 모두 Hugging Face에서 제공되며, Cosmos Coalition 파트너사는 휴먼 1M 데이터셋 전체에 접근할 수 있습니다.
- NVIDIA Isaac Lab 3.0: 정식 출시된 오픈소스 에이전트 지원 학습 프레임워크로, 멀티 GPU 워크플로우와 Newton, NVIDIA PhysX® 등의 물리 엔진을 활용해 데스크톱부터 데이터센터까지 로봇 정책을 학습하고 정교화할 수 있습니다.
- NVIDIA Isaac OS: NVIDIA Holoscan 기반의 오픈소스 런타임 프레임워크로, AI와 센서, 제어 시스템, 로봇 하드웨어를 연결해 시뮬레이션부터 실제 로봇까지 결정론적 실시간 성능을 제공합니다.
- NVIDIA DGX Station™용 오픈소스 레퍼런스 워크플로우 3종: 개발자는 강화학습을 통해 GR00T 1.7 모델을 정교화하고, NVIDIA Isaac Lab에서 정교한 조작 기술을 학습하며, ChatGPT Astra를 활용해 합성 데이터 생성을 위한 NVIDIA Cosmos™ 월드 모델을 사후 학습할 수 있습니다.
- NVIDIA Halos: NVIDIA IGX Thor™를 기반으로 구축된 풀스택 안전 플랫폼으로, 자율주행 차량과 로봇이 개발 단계에서 실제 환경으로 보다 안전하게 대규모 배포될 수 있도록 지원합니다.
Hugging Face의 SimReady Central Library에는 Comau, FANUC, ForgeCAD, Franka Robotics, LG Electronics, Palatial, Robotiq, Standard Bots, Universal Robots, Vertiv의 시뮬레이션 레디 애셋이 포함돼 있습니다.
DGX Station에서 실행되는 NVIDIA의 오픈소스 로봇 학습 레퍼런스 워크플로우는 1X, Agile Robots, Humanoid, Maven Robotics, Mentee, MicroAGI, Rhoda, Sereact, Skild AI의 솔루션을 통해 지원될 예정입니다.
Agile Robots, Agility, Dexory, FORT Robotics, KION 등 로보틱스 파트너사들은 창고 로봇의 안전성을 강화하기 위해 자사의 안전 아키텍처에 NVIDIA Halos를 통합하고 있는데요. SICK은 산업용 로봇의 동적 안전성을 향상시키기 위해 Halos를 평가 중이며, 이를 통해 로봇이 고정된 안전 구역을 넘어 변화하는 상황에도 대응할 수 있도록 지원하고 있습니다.
Advantech과 NexCOBOT은 NVIDIA IGX 기반 산업용 컴퓨팅 플랫폼을 개발하고 있고, Reynolds & Moore, Accenture, TÜV SÜD는 산업용 피지컬 AI의 안전한 배포를 위한 인증 절차를 가속화하고 있습니다.
유럽 로보틱스 선도 기업들, NVIDIA 오픈 기술 활용 확대
ABB Robotics는 NVIDIA Omniverse™ 라이브러리를 RobotStudio HyperReality와 통합해 다양한 산업 현장에서 로봇 시스템을 설치하기 전에 시뮬레이션하고 가상으로 시운전할 수 있도록 하고 있습니다. KUKA Group은 자사의 Visual Components FactoryLens에 Omniverse 라이브러리를 적용해 공장 시뮬레이션 워크플로우에 실시간 렌더링 기능을 추가하고 있고요. Universal Robots는 Isaac GR00T와 Cosmos Transfer를 활용해 Universal Robots의 산업용 로봇 팔에서 구동되는 물품 취급용 Cortex 플랫폼을 학습하고 사후 학습하고 있습니다.
Humanoid는 Jetson Thor, Holoscan Sensor Bridge, Halos, NVIDIA Isaac OS를 활용해 산업용 시범 운영에 앞서 로봇 동작을 개발하고 검증하고 있습니다. Hexagon Robotics는 원격 조작 영상 처리, 위치 추정, 매핑, 물체 자세 탐지를 포함한 AEON 인식 기능을 구축하고 있습니다. Bear Robotics는 창고, 반품, 산업용 워크플로우를 위해 Kino-2 기반으로 Isaac GR00T를 사후 학습하는 동시에 KR1의 인식 및 모델 실행을 가속화하고 있죠.
Toyota Material Handling Europe과 SoftServe는 Omniverse와 NVIDIA Isaac Sim™ 프레임워크를 활용해 자율 물류 처리 솔루션을 개발하고 있으며, 이를 통해 배포 시간을 최대 50% 단축하고 있습니다. Idealworks는 NVIDIA 오픈 모델과 Jetson을 활용해 공장 내 자율 이동 로봇을 위한 기억 기능을 개발하고 있습니다. Analog Devices Inc. (ADI)는 NVIDIA Jetson AGX Orin™과 cuVSLAM 라이브러리를 활용해 자율 이동 로봇을 개발하고 있죠.
Hugging Face와 Pollen Robotics는 NVIDIA Isaac Lab, Isaac Sim, Newton을 활용해 개발자와 학생들이 새로운 물리적 동작을 학습, 수정, 공유할 수 있도록 설계된 소형 오픈소스 로봇인 Microduck을 개발하고 있습니다. Franka Robotics는 NVIDIA NIM™ 마이크로서비스와 Isaac Sim을 활용해 Franka FR3 Duo 로봇 시스템에서 자연어 요청을 실제 동작으로 변환하고 있습니다. Bellboy는 Jetson과 GR00T를 사용해 자사의 피지컬 AI 인프라를 기반으로 개발한 첫 번째 로봇 동료인 Billie를 구동하고 있으며, 빌리는 이미 Marriott, Hilton, IHG, OYO가 운영하는 호텔에 배치돼 있습니다.
Flexion은 Isaac Lab과 Newton을 기반으로 추론과 전신 움직임을 결합해 다양한 로봇 신체에 걸쳐 복잡한 조작을 수행하는 통합 로봇 지능 모델인 Reflect의 학습을 확장하고 있는데요. Schaeffler는 Newton의 독점적 기반 구성 요소로 자사의 액추에이터 기술을 제공해 NVIDIA Isaac Lab과 Isaac Sim을 활용한 휴머노이드 로봇 개발 가속화에 기여하고 있습니다.
NEURA Robotics는 자사의 멀티모달 파운데이션 모델인 Neuron AI를 위해 Isaac Sim과 Isaac Lab을 통해 합성 훈련 데이터를 생성하고 시뮬레이션 환경에서 로봇 기술을 학습시키고 있습니다.
NVIDIA 젠슨 황 CEO의 GTC Berlin 키노트를 시청하고, 관련 세션을 확인하세요