Kvark Sparkle 1.1, 추론 토큰 최대 48% 절감 및 문서 거부 정확도 향상

Kvark Sparkle 1.1 (Qwen3.8-27B fine-tune, Apache 2.0): agentic document QA that says "not in the documents" 91.5% of the time, with 7-48% fewer reasoning tokens than the base

·2026.11.11 00:00

핵심 내용

Egzakta가 문서 QA용 Qwen3.8-27B 파인튜닝 모델 Kvark Sparkle 1.1을 출시했다

자세히 보기

  • Egzakta가 검색 및 read_page 도구를 활용한 에이전틱 문서 QA에 최적화된 Qwen3.8-27B의 오픈 웨이트 Apache 2.0 파인튜닝 모델 Kvark Sparkle 1.1을 출시함
  • 문서에 사실이 없을 때 답변을 거부하는 정확도가 91.5%로, 이전 버전 Sparkle 1.0의 36% 및 스탑 룰 적용 시 74% 대비 크게 향상됨
  • 베이스 모델 대비 추론 토큰 사용량이 GPQA Diamond에서 42%, FRAMES에서 48% 감소했으며, AIME 2026 기준 중앙값 토큰은 14,822에서 8,732로 줄어듦
  • SWE-bench Verified 성능이 베이스 모델(81.8)보다 현저히 낮은 73.0을 기록하여, 짧은 사고 체인이 에이전틱 코딩 작업의 정확도를 저하시킨다는 점을 시사함
  • Hugging Face에서 BF16, FP8, GGUF 포맷으로 제공되며, MTP 추측 디코딩을 사용하는 vLLM 서빙 구성을 권장함

이 한국어 요약은 AI가 자동으로 만들었습니다. 원문의 주장과 맥락은 원문에서 확인해 주세요. 저작권은 원저작자에게 있습니다.

AI 처리 방식을 확인하거나, 요약 오류와 출처 표기 문제, 삭제 요청을 문의 · 건의로 알려주세요.