Qwen3.8-27B, 제로샷 오케스트레이션으로 LiveCodeBench 92.4% 달성
·2026.10.25 12:56
핵심 내용
학습 불필요한 오케스트레이션 기법으로 Qwen3.8-27B 정확도를 92.4%까지 끌어올렸다
자세히 보기
- 학습 불필요한 'ledger-based zero-shot self-orchestration' 기법 도입, 신규 모델 인스턴스가 문제를 분해하고 공유 파일시스템을 통해 조정함
- 로컬 서빙된 오픈 웨이트 Qwen3.8-27B의 LiveCodeBench 최신 난이도 100개 문제 정확도가 66.8%에서 92.4%로 상승함
- 오케스트레이션된 Qwen3.8 Flash Next가 pass@1 93.0% 달성, 비용 9% 수준에서 Claude Fable 5의 90.4%를 초과함
- 모든 모델에서 동일한 향상이 나타나지 않으며 일부 모델은 개선 없거나 성능 저하 발생함
- 트랜스크립트 분석 결과 정확도 향상의 원인으로 문제 분해 및 영속적 컨텍스트를 지목함
- 코드는 MIT License, 논문 및 도표는 CC BY 4.0 하에 공개됨
이 한국어 요약은 AI가 자동으로 만들었습니다. 원문의 주장과 맥락은 원문에서 확인해 주세요. 저작권은 원저작자에게 있습니다.