AllenAI, MolmoMotion 비전 모델 출시

AllenAI가 MolmoMotion 제품군인 두 가지 새로운 비전-언어 모델을 출시했습니다. 이 모델들은 짧은 RGB 관측 이력을 바탕으로 자연어 동작 지시에 따른 **3D 포인트 궤적(3D point trajectories)**을 예측합니다.

모델의 주요 특징은 다음과 같습니다:

• 작동 원리: 사용자가 지정한 2D 쿼리 포인트와 그 3D 이력을 입력받아, 미래 시점의 3D 위치(카메라 프레임 기준, 미터 단위)를 예측합니다.
• 모델 구성: 3프레임 이력을 사용하는 모델과 1프레임 이력을 사용하는 모델 두 가지 버전이 제공됩니다.
• 활용 분야: 과거 관측 데이터를 기반으로 객체의 미래 위치를 예측해야 하는 모든 시각적 AI 애플리케이션에 유용합니다.

해당 모델은 Hugging Face를 통해 공개되었습니다.