#llm-benchmarking

#llm-benchmarking와 관련된 AI·개발 뉴스를 최신순으로 모았습니다. 원문 출처와 한국어 요약을 함께 확인할 수 있습니다.

지연 SLO 기반 최대 동시성 탐색과 WEKA/OTEL 형식의 에이전트 트레이스 재생 기능이 추가됐다.

·2·2026.10.12 11시

Vibe Code Bench에서 에이전트 팀은 비용을 1.8~5.1배 늘렸으나 유의미한 점수 개선은 제한적이었다.

·2026.10.09 09시

LMArena가 인간 선호도와 사실성을 결합한 새로운 랭킹 시스템을 도입했다.

·1·2026.07.16 01시

Hugging Face가 모델 평가 결과의 파편화 문제를 해결하기 위해 EEE와 Community Evals를 통합했다.

·1·2026.06.30 09시

음성 에이전트의 정확도와 대화 경험을 동시에 평가하는 새로운 프레임워크 EVA가 공개되었다.

·2026.03.24 11시

ReAct 에이전트에게 제공되는 지시사항과 도구의 수가 성능에 미치는 영향을 분석했다.

·2025.02.11 02시

GCP의 5세대 Xeon(C4) 인스턴스가 이전 세대 대비 텍스트 임베딩 및 생성 성능에서 압도적인 효율성을 입증했다.

·2·2024.12.17 09시

LangChain이 LLM 에이전트의 도구 사용 및 함수 호출 성능을 측정하는 4가지 새로운 테스트 환경을 공개했다.

·2023.12.20 15시