CES 2026에서 공개된 기술의 미래는 그 규모부터 압도적이었습니다. 무대 위에 올리기조차 어려웠던 6톤급 노란색 강철 중장비가 그 주인공이었는데요. NVIDIA 로보틱스 및 엣지 AI 부문 부사장인 Deepu Talla는 Caterpillar와 협력하여 올해 CES 최대 중량 규모의 기술 시연을 선보였습니다.
캐터필러의 기조연설 중 중계 화면이 건설 장비 생산 부스로 전환되자, 라이브 데모를 앞둔 Cat 306 CR 미니 굴착기(Cat 306 CR Mini Excavator)가 모습을 드러냈습니다. 이번 시연의 핵심은 운전석 내부의 실시간 영상과 함께 소개된 자연어 기반 상호작용 기술이었습니다.
운전자가 “Hey Cat, 시작 방법을 알려줘(Hey Cat, how do I get started?)”라고 음성 명령을 내리자, 장비에 탑재된 AI 시스템이 즉각 자연스러운 음성으로 응답하며 굴착기 암을 구동시켰습니다.
캐터필러 CEO Joe Creed는 “캐터필러는 현대 기술 스택의 보이지 않는 기반을 구축하고, 이를 물리적 세계에서 실제로 움직이게 하는 기업”이라며, “이러한 혁신을 전 세계적인 규모로 수행하는 것이 캐터필러의 핵심 역할”이라고 강조했습니다.
CES에서 공개된 이번 데모는 기술 스택의 보이지 않던 기반과 작업자의 안전성, 효율성, 직관성을 높여주는 AI 설계를 선보였습니다.
캐터필러 중장비는 다양한 기후, 지형, 작업 환경에 대응할 수 있도록 설계됐죠. 특히 캣 306 CR 미니 굴착기는 정밀 제어와 운전자 보조 기능으로 이미 글로벌 현장에서 검증된 장비로, 전 세계 대규모 건설 현장부터 소규모 작업 현장까지 광범위하게 활용되고 있습니다.
캐터필러가 데모에서 선보인 캣 AI 어시스턴트(Cat AI Assistant)는 산업과 로봇 시스템의 실시간 추론을 위해 구축된 NVIDIA 엣지 AI 플랫폼인 NVIDIA Jetson Thor를 기반으로 구동됩니다.
NVIDIA Riva는 대화 기능을 지원하며, NVIDIA Nemotron 음성 모델을 기반으로 빠르고 정확한 자연어 상호작용을 구현하죠.
vLLM을 통해 로컬에서 제공되는 큐웬3(Qwen3) 4B 모델은 요청을 해석하고 응답을 생성하며, 클라우드 연결 없이도 낮은 지연 시간을 보장합니다.
캐터필러 헬리오스(Helios) 데이터 플랫폼은 신뢰할 수 있는 기계 컨텍스트를 제공합니다.
CES 데모에서 구현된 기술들은 다음과 같습니다.
- 안전과 작업 범위(E-Ceiling): 작업자는 지상과 지하의 위험을 피하기 위해 동작 범위를 제한하는 등 기계 위치 설정을 지원하는 보조 기능을 시연했습니다. 음성 상호작용은 이 설정을 가속화하는데요. 예를 들어, 확인된 유틸리티 위의 바닥 경계를 조정하는 것이 가능합니다.
- 직관적인 제어: 좁은 공간에서는 캣 306의 제어 옵션이 중요합니다. AI는 보조 장치 역할을 수행해 운전자가 기능을 찾고, 기계 동작을 이해하며, 자연스러운 대화를 통해 문제를 해결할 수 있도록 돕습니다.
- 기내 AI 지원: 캐터필러의 캣 AI 어시스턴트는 맞춤형 조언, 안전 중심 경고, 문서와 자원 접근 제공 등의 잠재력을 선보였습니다.
NVIDIA와 캐터필러는 엣지 AI를 활용해 증가하는 기계 데이터를 시의적절하고 실행 가능한 인사이트로 전환합니다. 이렇게 기술적 기반을 장비와 작업 현장 전반으로 확장하는 방안을 공동으로 모색하고 있죠.
캐터필러는 미국 내 다양한 제조 시설에서 NVIDIA Omniverse 라이브러리와 오픈USD(OpenUSD)를 기반으로 구축된 공장 디지털 트윈을 시범 운영 중입니다.
이러한 디지털 트윈은 실제 설비 변경 전에 라인 변경 시뮬레이션, 스케줄링 시나리오 테스트, 자재 흐름 최적화를 지원합니다. AI의 부상은 도로, 항만, 전력 시스템을 건설하고 유지하는 데 필요한 물리적 장비와 인프라의 새로운 수요를 가속화하는데요.
캐터필러는 향후 5년 간 1억 달러를 인력 양성과 교육에 투자한다고 밝혔습니다. 여기에는 2,500만 달러 규모의 ‘글로벌 워크포스 이노베이션(Global Workforce Innovation)’ 챌린지도 포함됩니다. 이는 차세대 AI 기반 산업 시스템에 대비한 임직원 양성 솔루션 확대 프로그램입니다.
데모 현장에서 화면에 노란색 페인트가 반짝이는 캐터필러 306 미니 굴삭기가 비추자, 캐터필러 CEO Joe Creed는 관중을 향해 “오늘 한 가지만 기억해 준다면, 바로 이것이길 바랍니다. 캐터필러는 여전히 여러분이 매일 의지하는 물리적 세계를 구축하고 움직이는 기업입니다. 그리고 이제 현대 기술 스택의 보이지 않는 층을 더욱 지능적으로 만들고 있습니다”고 말했습니다.
세계는 점점 더 스마트해지고 있습니다. 엣지 AI를 통해 장비가 듣고, 이해하고, 지원하는 시대가 본격화되면서 산업 현장의 미래가 빠르게 현실로 다가올 것입니다.
기술 하이라이트
- NVIDIA Jetson Thor: 산업과 로봇 시스템에서 실시간 추론을 위한 엣지 AI 플랫폼
- NVIDIA Riva: Parakeet ASR 및 Magpie TTS를 활용한 음성 AI 프레임워크
- 큐웬3 4B LLM: 의도 분석과 응답 생성을 위한 컴팩트 거대 언어 모델(large language model, LLM)
- vLLM: 엣지에서 LLM 추론을 효율적으로 제공하는 런타임
- 캐터필러 헬리오스: 신뢰할 수 있는 기계 컨텍스트를 제공하는 통합 데이터 플랫폼
- NVIDIA Omniverse: 산업 워크플로우를 위한 디지털 트윈과 시뮬레이션 라이브러리, 프레임워크