#machine-learning-theory
#machine-learning-theory와 관련된 AI·개발 뉴스를 최신순으로 모았습니다. 원문 출처와 한국어 요약을 함께 확인할 수 있습니다.
#machine-learning-theory와 관련된 AI·개발 뉴스를 최신순으로 모았습니다. 원문 출처와 한국어 요약을 함께 확인할 수 있습니다.
Karimi의 2016년 논문이 비볼록 ML에서 선형 수렴을 증명해 ECML PKDD 상을 수상했다
Attention sinks와 Representation collapse가 Attention 자체의 문제가 아닌, Norm-blind한 유사도 측정 방식에서 기인함을 증명함.
신경망의 시퀀스 처리 방식과 암호학의 스폰지(Sponge) 구조 간의 구조적 유사성을 분석한다.
supervised learning의 구조적 geometric blind spot을 보이며, adversarial training이 이를 더 악화시킨다고 주장했다.