AI Briefing#backpropagation
#backpropagation와 관련된 AI·개발 뉴스를 최신순으로 모았습니다. 원문 출처와 한국어 요약을 함께 확인할 수 있습니다.
#backpropagation와 관련된 AI·개발 뉴스를 최신순으로 모았습니다. 원문 출처와 한국어 요약을 함께 확인할 수 있습니다.
허깅페이스에 공개된 VKORE-46M-NPU 모델카드 분석... 추론 전용 NPU에서 역전파 학습 주장 및 GPU와의 손실 궤적 비교
Sakana AI가 기존 Predictive Coding(PC)의 신호 감쇠 문제를 해결한 PC-ALM을 제안하여 1000층 신경망 학습에 성공했다.
역전파는 학습 직후 V1 영역의 뇌 정렬을 급격히 떨어뜨리지만, 예측 코딩 등 국소 학습 규칙은 이를 유지한다.
네트워크를 블록 단위로 나누어 독립적으로 학습함으로써 메모리 사용량을 획기적으로 줄이는 새로운 방식을 제안했다.