xAI, Grok 공개

xAI는 '은하수를 여행하는 히치하이커를 위한 안내서'를 모델로 한 새로운 AI, Grok을 공개했다. Grok은 위트 있는 답변과 반항적인 성격을 지향하며, 𝕏 플랫폼을 통해 실시간 세계 지식을 활용한다는 점이 핵심적인 차별점이다. 또한 다른 AI 시스템이 거부하는 민감한 질문에도 답변할 수 있도록 설계되었다.

Grok의 핵심 엔진인 Grok-1은 강력한 추론 및 코딩 능력을 갖춘 프런티어 LLM이다. 주요 벤치마크 결과는 다음과 같다:

• HumanEval (코딩): 63.2%
• MMLU (다학제적 지식): 73%

이 결과는 GPT-3.5와 Inflection-1 등 동급 컴퓨팅 자원을 사용한 모델들을 상회하는 수치다.

실제 수학 문제 해결 능력을 검증하기 위해 실시한 2023년 헝가리 국가 고교 수학 기말고사 평가에서 Grok-1은 **59%(C 학점)**를 기록했다. 이는 **Claude-2(55%)**와 유사한 수준이며, **GPT-4(68%)**에는 미치지 못하는 성적이다.