#training-dynamics와 관련된 AI·개발 뉴스를 최신순으로 모았습니다. 원문 출처와 한국어 요약을 함께 확인할 수 있습니다.
OLMo3-32B는 산술 평가에서 2.17T~2.19T 토큰 구간 점수가 81%에서 0%로 급락했다.
그래프 스펙트럼 분석을 통해 신경망의 grokking 현상을 손실 함수보다 훨씬 빠르게 예측할 수 있다.