Unsloth, GSQ-RCO 대비 10~20% 성능 우위 입증
Unsloth vs GSQ-RCO - 512K context DeepSeek-V4.1 GGUF benchmarks Terminal Bench
·2026.11.03 00:57
핵심 내용
Unsloth, DeepSeek-V4.1 벤치마크에서 GSQ-RCO 대비 10~20% 우위 입증했다
자세히 보기
- DeepSeek-V4.1용 Unsloth Dynamic 3.1 GGUF가 512K 컨텍스트 환경에서 DeepSWE, Terminal Bench, Automation Bench 벤치마크 기준 GSQ-RCO 대비 10~20% 높은 성능을 기록함
- GSQ-RCO 양자화 주장에 대한 통계적 재평가를 통해 IQ1_M 복구율이 주장된 98.7%보다 현저히 낮게 측정됨(97.24%), IQ2_XXS의 99.80% 복구율은 통계적으로 거의 불가능한 것으로 나타남(p=0.0001)
- 노이즈 감소 및 신뢰도 향상을 위해 이전 실행 대비 27배 증가한 35.1B 토큰 규모의 벤치마킹 데이터를 활용함
- AIME2025(64x 실행), DeepSWE, Terminal Bench 벤치마크를 포함하며, 이전 방법론적 문제를 해결하기 위해 특정 인프라 수정 및 공식 그레이더를 적용함
이 한국어 요약은 AI가 자동으로 만들었습니다. 원문의 주장과 맥락은 원문에서 확인해 주세요. 저작권은 원저작자에게 있습니다.