AI Briefing#open-llm-leaderboard
#open-llm-leaderboard와 관련된 AI·개발 뉴스를 최신순으로 모았습니다. 원문 출처와 한국어 요약을 함께 확인할 수 있습니다.
#open-llm-leaderboard와 관련된 AI·개발 뉴스를 최신순으로 모았습니다. 원문 출처와 한국어 요약을 함께 확인할 수 있습니다.
Upstage의 Solar LLM이 Sendbird 노코드 AI 챗봇에 통합됐다.
Hugging Face가 Math-Verify 도입으로 Open LLM Leaderboard의 수학 평가 오류를 해결하고 순위를 재산정했다.
Hugging Face의 Open LLM Leaderboard 1위를 달성한 모델의 성능 평가 방식과 모델 병합(Model Merge) 기술을 소개한다.
Open LLM Leaderboard의 DROP 벤치마크에서 모델 점수가 비정상적으로 낮게 측정된 원인이 평가 지표의 정규화 오류임을 밝혀냈다.
Open LLM Leaderboard와 모델 논문 간의 MMLU 벤치마크 점수 차이가 발생하는 기술적 원인을 분석한다.
업스테이지 Solar 10.7B가 Hugging Face Open LLM Leaderboard 1위를 차지했다.