- 젯슨 토르 기반 캣 AI 어시스턴트·디지털 트윈 기술 시연

엔비디아가 CES 2026에서 캐터필러와 협력해 AI 기반 미래형 중장비 솔루션을 공개했다. 엔비디아는 캐터필러 중장비에 자사의 엣지 AI 플랫폼을 결합해, 산업 현장에서 자연어 기반 상호작용과 실시간 추론을 구현하는 기술 적용 가능성을 제시했다.
캐터필러는 CES 2026 현장에서 6톤급 캣 306 CR 미니 굴착기를 활용한 라이브 데모를 선보였다. 노란색 강철 차체의 실제 장비가 무대에 등장한 이번 시연은 올해 CES에서 가장 큰 중량 규모의 데모 중 하나로 주목을 받았다.
데모는 엔비디아 로보틱스·엣지 AI 부문 디푸 탈라 부사장과 캐터필러가 함께 진행했다. 캐터필러 CES 기조연설 도중 화면이 건설 장비 생산 부스로 전환되며, 운전석 내부 실시간 영상과 함께 중장비에 적용된 음성 기반 자연어 상호작용 기술이 공개됐다.
음성으로 작동하는 AI 중장비
시연에서는 “안녕 캣, 시작 방법을 알려줘(Hey Cat, how do I get started?)”라는 음성 명령이 전달되자, 장비에 탑재된 AI 시스템이 자연스러운 음성으로 응답하며 굴착기 암이 실제로 작동했다. 음성 명령과 기계 동작이 즉각적으로 연동되는 모습은 엣지 AI 기반 제어의 가능성을 보여줬다.
캐터필러 CEO 조 크리드는 “캐터필러는 현대 기술 스택의 보이지 않는 기반을 구축하고 이를 실제로 움직이는 기업으로, 이 역할을 전 세계에서 대규모로 수행하는 것이 캐터필러의 핵심”이라고 밝혔다.
젯슨 토르 기반 캣 AI 어시스턴트
CES에서 공개된 캣 AI 어시스턴트는 엔비디아의 엣지 AI 플랫폼 젯슨 토르(Jetson Thor)를 기반으로 구동된다. 산업 및 로봇 시스템을 위한 실시간 추론 환경에서 장비 상태와 작업 맥락을 이해하고, 음성 명령에 즉각 반응하도록 설계됐다.
음성 상호작용은 엔비디아 리바(Riva)와 네모트론(Nemotron) 음성 모델이 담당한다. 여기에 vLLM을 통해 로컬에서 실행되는 큐웬3(Qwen3) 4B 모델이 명령 의도를 해석하고 응답을 생성해, 클라우드 연결 없이도 낮은 지연 시간을 유지한다. 캐터필러의 헬리오스(Helios) 데이터 플랫폼은 장비 운용에 필요한 신뢰도 높은 기계 컨텍스트를 제공한다.

옴니버스 기반 공장 디지털 트윈 시범 운영
캐터필러는 미국 내 여러 제조 시설에서 엔비디아 옴니버스(Omniverse) 라이브러리와 오픈USD(OpenUSD)를 기반으로 구축한 공장 디지털 트윈을 시범 운영 중이다. 해당 디지털 트윈은 실제 설비 변경 전에 라인 변경 시뮬레이션, 스케줄링 시나리오 테스트, 자재 흐름 최적화를 지원한다.
AI 수요 증가로 도로, 항만, 전력 시스템 등 물리적 인프라 구축 필요성이 확대되면서, 캐터필러는 향후 5년간 1억 달러를 인력 양성과 교육에 투자할 계획이다. 여기에는 2,500만 달러 규모의 ‘글로벌 워크포스 이노베이션’ 프로그램도 포함된다.
CES 현장에서 캣 306 CR 미니 굴착기가 화면에 비춰지자 조 크리드 CEO는 “캐터필러는 전 세계가 매일 의지하는 물리적 세계를 구축하고 움직이는 기업으로, 이제 현대 기술 스택의 보이지 않는 층을 더욱 지능적으로 만들고 있다”고 밝혔다.
엣지 AI를 통해 장비가 듣고, 이해하고, 지원하는 환경이 본격화되면서 산업 현장의 미래가 빠르게 현실로 다가오고 있다.
- #엔비디아 #캐터필러 #엣지AI #젯슨토르 #산업AI #디지털트윈 #중장비AI