Qwen3.8-27B, 제로샷 오케스트레이션으로 LiveCodeBench 92.4% 달성

·2026.10.25 12:56

핵심 내용

학습 불필요한 오케스트레이션 기법으로 Qwen3.8-27B 정확도를 92.4%까지 끌어올렸다

1 / 3

자세히 보기

  • 학습 불필요한 'ledger-based zero-shot self-orchestration' 기법 도입, 신규 모델 인스턴스가 문제를 분해하고 공유 파일시스템을 통해 조정함
  • 로컬 서빙된 오픈 웨이트 Qwen3.8-27B의 LiveCodeBench 최신 난이도 100개 문제 정확도가 66.8%에서 92.4%로 상승함
  • 오케스트레이션된 Qwen3.8 Flash Next가 pass@1 93.0% 달성, 비용 9% 수준에서 Claude Fable 5의 90.4%를 초과함
  • 모든 모델에서 동일한 향상이 나타나지 않으며 일부 모델은 개선 없거나 성능 저하 발생함
  • 트랜스크립트 분석 결과 정확도 향상의 원인으로 문제 분해 및 영속적 컨텍스트를 지목함
  • 코드는 MIT License, 논문 및 도표는 CC BY 4.0 하에 공개됨

이 한국어 요약은 AI가 자동으로 만들었습니다. 원문의 주장과 맥락은 원문에서 확인해 주세요. 저작권은 원저작자에게 있습니다.

AI 처리 방식을 확인하거나, 요약 오류와 출처 표기 문제, 삭제 요청을 문의 · 건의로 알려주세요.