업스테이지, HuggingFace LLM 리더보드 1위 달성
업스테이지의 최신 LLM이 HuggingFace 리더보드에서 GPT-3.5를 제치고 세계 1위를 기록했다.
한국의 AI 스타트업 **업스테이지(Upstage)**가 최신 LLM을 공개하며 HuggingFace Open LLM Leaderboard에서 평균 점수 72.3점을 기록, 세계 1위에 올랐다. 이는 GPT-3.5(71.9점)의 점수를 넘어선 결과로, 오픈소스 모델이 글로벌 빅테크의 모델을 앞지른 기념비적인 성과다.
이번 모델은 LLaMA 2를 기반으로 70B(700억 개) 파라미터 규모로 학습 및 미세 조정(Fine-tuning)되었다. 평가 항목은 다음과 같다.
- 추론 능력(Reasoning challenge)
- 상식 추론(Common sense inference)
- 문맥 이해(Contextual understanding)
- 사실 정확도(Factual accuracy)
업스테이지는 한국어 NLU 데이터셋인 KLUE 구축 경험과 자사 서비스 AskUp의 프롬프트 엔지니어링 기술을 활용해 단 2개월 만에 이 성과를 이뤄냈다. 향후 기업의 보안을 보장하는 Private AI 시장 공략에 집중할 계획이다.
이 요약은 원문 이해를 돕기 위한 큐레이션입니다. 저작권은 원저작자에게 있으며, 정확한 내용과 맥락은 원문을 확인하세요.
요약 오류, 출처 표기 문제, 삭제 요청은 문의 · 건의로 알려주세요.