집단 모방과 단일 에이전트 RL 동치성 증명
[R] The Hive Mind is a Single Reinforcement Learning Agent: Deriving the Exact Equivalence Between Swarm Dynamics and Multi-Armed Bandits
·2026.10.24 00:37
핵심 내용
연구진이 집단 모방과 단일 에이전트 RL의 수학적 동치성을 증명했다.
자세히 보기
- 다중 팔 밴딧(multi-armed bandit) 환경에서 로컬 모방을 통한 집단 의사결정과 단일 에이전트 강화학습(RL) 간의 수학적 동치성을 증명함
- 꿀벌의 와글 댄스(waggle dance) 가중 투표 모델에서 새로운 매크로 레벨 RL 알고리즘인 메이너드-크로스 러닝(MCL)을 도출함
- 학습하지 않는 N개체가 N개의 병렬 환경 롤아웃으로 작용하며, 샘플당 유효 스텝 사이즈가 alpha = 1/N임을 보임
- 분산형 사회적 모방에서 로컬 개인 간 상호작용과 글로벌 정책 업데이트를 연결하기 위해 진화 복제자 동역학(evolutionary replicator dynamics)을 적용함
- 단순한 비학습 개체로부터 집단 수준에서 시행착오 학습이 어떻게 발생하는지에 대한 형식적 메커니즘을 제공함
- 사회적 및 경제적 시스템의 모방 동역학을 분석하고 확장 가능한 분산형 스웜 로봇 알고리즘을 설계하는 도구를 제시함
이 한국어 요약은 AI가 자동으로 만들었습니다. 원문의 주장과 맥락은 원문에서 확인해 주세요. 저작권은 원저작자에게 있습니다.