Gemma 4 KV 캐시 grafting 기술 공개
Byte exact KV cache grafting on frozen Gemma 4
·2026.07.19 06:24
검증된 지식을 KV 상태로 저장하여 재계산 없이 복원하는 새로운 KV 캐시 기법을 발표했다.
검증된 지식을 KV state로 저장한 뒤, 새로운 계산 과정 없이도 byte-identical하게 복원할 수 있는 새로운 방법론을 공개했다.
Gemma 4 12B 모델을 대상으로 테스트한 결과, 해당 기술을 적용했을 때 AIME 2025 벤치마크의 라우팅 시스템 성능이 기존 76.7%에서 90.0%로 향상되는 결과를 보였다.
해당 연구 결과는 오는 7월 19일 AGI Summit에서 발표될 예정이다.
이 요약은 원문 이해를 돕기 위한 큐레이션입니다. 저작권은 원저작자에게 있으며, 정확한 내용과 맥락은 원문을 확인하세요.
요약 오류, 출처 표기 문제, 삭제 요청은 문의 · 건의로 알려주세요.