AI Briefing#llm-benchmarks
#llm-benchmarks와 관련된 AI·개발 뉴스를 최신순으로 모았습니다. 원문 출처와 한국어 요약을 함께 확인할 수 있습니다.
#llm-benchmarks와 관련된 AI·개발 뉴스를 최신순으로 모았습니다. 원문 출처와 한국어 요약을 함께 확인할 수 있습니다.
Moonshot AI가 2.8T 파라미터 모델 Kimi K3.1 Pro를 오픈웨이트로 공개했다.
DeepSeek V4.1 Flash 1017이 지능 지수 45점을 기록하며 유사 모델 중앙값을 크게 상회했다.
M5 Ultra Mac Studio 4대 클러스터로 816B 파라미터 모델 추론 시 초당 36토큰을 달성했다.
Paper Instruments가 Ultramarine 1 Flash를 공개해 60배 저렴한 비용으로 Fable급 성능을 구현했다.
입력 100만 토큰당 2달러, 출력 100만 토큰당 10달러에 제공되며 사이버 보안 방어에 특화됨
OpenAI가 GPT-6 Astra급 성능을 5분의 1 비용으로 제공하는 GPT-6.1 Sol을 출시했다.
UC Berkeley 연구진이 코딩 에이전트 하네스 설계에 따라 동일 품질 달성 비용이 최대 5배까지 차이 나는 'Harness Tax' 현상을 규명했다.
Artificial Analysis가 Capability Indices v1.1을 발표했으며, Claude Fable 5.1이 6개 직업군 인덱스 모두에서 1위를 차지했고 Grok 4.5는 높은 비용 효율성을 입증했다.