#qwen2와 관련된 AI·개발 뉴스를 최신순으로 모았습니다. 원문 출처와 한국어 요약을 함께 확인할 수 있습니다.
Ollama의 KV 캐시 양자화 설정은 전역으로 적용되어 특정 모델의 성능 저하를 유발할 수 있다.
KV cache INT4가 일부 모델에서 무너지는 원인을 찾고 4줄짜리 보정으로 개선했다.
Qwen이 성능과 다국어 능력을 대폭 강화한 차세대 모델 Qwen2를 공개했다.
8k 컨텍스트 모델을 활용해 1M 컨텍스트를 처리하는 에이전트를 구축하고, 이를 통해 롱 컨텍스트 모델을 학습시키는 전략을 제시한다.