ST – Leopard, 로봇용 멀티센서 비전 모듈 공개

STMicroelectronics와 Leopard Imaging이 휴머노이드 로봇 및 첨단 로봇 시스템을 위한 올인원 멀티모달 비전 모듈을 선보였다. 이번 모듈은 ST의 이미징, 3D 장면 매핑, 모션 감지 기능을 통합하고, NVIDIA Holoscan Sensor Bridge 기반으로 NVIDIA Jetson 및 NVIDIA Isaac 로봇 개발 플랫폼과 직접 연동되도록 설계된 것이 특징이다.

해당 모듈은 로봇 시스템의 크기, 무게, 전력 (SWaP) 제약 조건을 고려해 설계됐으며, 다양한 센서데이터를 통합 처리함으로써 비전 시스템 설계를 간소화하고 개발 속도를 높인다. 특히 이더넷 기반 연결을 통해 실시간 센서 데이터 수집이 가능하며, NVIDIA Isaac 플랫폼과의 연계를 통해 AI 모델, 시뮬레이션 환경, 개발 라이브러리를 활용할 수 있다.

또한 API, 빌드 시스템, 샘플 애플리케이션, 도메인 무작위화 기능, 센서 모델 등을 포함한 개발 환경을 제공해 로봇 개발자가 시뮬레이션에서 실제 구현으로 전환하는 과정을 단축할 수있도록 지원한다. 이를 통해 휴머노이드 로봇을 비롯한 다양한 로봇 애플리케이션에서 데이터 수집과 학습 효율을 높이고, AI 기반 인지기능 구현을 가속화할 수 있다.

양사는 이번 협력을 통해 ST의 센서 및 액추에이터 기술을 NVIDIA 로봇 생태계에 통합함으로써, 제조, 물류, 자동차, 리테일 등 다양한 산업 분야에서 로봇 비전 기술 적용을 확대해 나갈 계획이다.