핸즈프리로 진화하는 AI: NVIDIA XR AI, AR 글래스에 에이전트 도입

AI가 챗봇을 넘어 물리적 세계로 확장되고 있습니다. NVIDIA XR AI는 개발자가 AR 글래스 및 XR 기기의 입력을 AI 모델, 기업 데이터, 가속 컴퓨팅과 연결하여, 작업 흐름 속에서 직접 인지하고 추론하며 행동하는 에이전틱(Agentic) 애플리케이션을 구축할 수 있도록 돕는 개발자 라이브러리입니다.

이 플랫폼은 다음과 같은 네 가지 핵심 역량을 제공합니다:

• 실세계 신호 수집: 비디오, 오디오, 깊이(Depth), 포즈 및 센서 데이터 통합
• 전문 도구 연결: NVIDIA Metropolis(비주얼 AI), NVIDIA NeMo Retriever(기업 지식 검색) 등과 연동
• 광범위한 모델 지원: NVIDIA Nemotron 추론 모델 및 다양한 파운데이션 모델 지원
• 오케스트레이션 및 런타임: 프로토타입에서 실제 운영 환경으로의 빠른 전환 지원

현재 Siemens는 공장 엔지니어가 AR 글래스를 통해 유지보수 정보를 실시간으로 확인하는 데 이 기술을 활용 중이며, Rana는 LabOS 시스템을 통해 스탠퍼드 및 프린스턴 대학 연구실에서 실험 과정을 가이드하는 핸즈프리 AI 과학자를 구현하고 있습니다. 이 시스템은 Meta, Rokid, VITURE의 스마트 글래스와 호환됩니다.