Zyphra, 추론 MoE 'ZAYA1-8B' 공개
Has anyone tried Zyphra 1 - 8B MoE?
·2026.05.07 05:39
Zyphra가 1B 미만의 활성 파라미터를 가진 추론 특화 MoE 모델 ZAYA1-8B를 출시했다.
Zyphra가 새로운 추론용 MoE(Mixture of Experts) 모델인 ZAYA1-8B를 공개했다.
이 모델은 AMD 하드웨어에서 학습되었으며, **지능 밀도(intelligence density)**를 최적화하도록 설계되었다.
1B 미만의 활성 파라미터를 사용함에도 불구하고, 수학 및 추론 분야에서 자신보다 훨씬 큰 규모의 오픈 웨이트 모델들을 능가하는 성능을 보여준다. 특히 테스트 시간 연산(test-time compute)을 활용할 경우 DeepSeek-V3.2 및 GPT-5-High 수준에 근접하는 성능을 기록한다고 밝혔다.
이 요약은 원문 이해를 돕기 위한 큐레이션입니다. 저작권은 원저작자에게 있으며, 정확한 내용과 맥락은 원문을 확인하세요.
요약 오류, 출처 표기 문제, 삭제 요청은 문의 · 건의로 알려주세요.