dots3-note 280B MoE 공개

dots3-note preview는 dots3 제품군의 첫 번째 오픈 웨이트(open-weight) 모델이다. Mixture-of-Experts (MoE) 구조를 채택하여 총 파라미터는 280B이지만, 추론 시에는 16B의 파라미터만 활성화된다.

최대 512K 토큰의 컨텍스트 길이를 지원하며, 텍스트, 이미지, 비디오, 오디오를 이해하고 텍스트를 출력하는 멀티모달 기능을 갖췄다.

주요 최적화 영역은 다음과 같다:

• 일반 지식 및 지시 이행, 수학적·논리적 추론
• 도구 사용(Tool use) 및 다단계 에이전트 워크플로우
• 코드 생성 및 코드 기반 문제 해결
• 이미지, 문서, 차트, 오디오, 비디오 이해
• 장기 컨텍스트(Long-context) 정보 처리

이 모델은 dots3 제품군 중 가장 가벼운 모델로, 모델의 역량, 지연 시간, 추론 비용 간의 최적의 균형을 제공하도록 설계되었다.