집단 모방과 단일 에이전트 RL 동치성 증명

[R] The Hive Mind is a Single Reinforcement Learning Agent: Deriving the Exact Equivalence Between Swarm Dynamics and Multi-Armed Bandits

·2026.10.24 00:37

핵심 내용

연구진이 집단 모방과 단일 에이전트 RL의 수학적 동치성을 증명했다.

자세히 보기

  • 다중 팔 밴딧(multi-armed bandit) 환경에서 로컬 모방을 통한 집단 의사결정과 단일 에이전트 강화학습(RL) 간의 수학적 동치성을 증명함
  • 꿀벌의 와글 댄스(waggle dance) 가중 투표 모델에서 새로운 매크로 레벨 RL 알고리즘인 메이너드-크로스 러닝(MCL)을 도출함
  • 학습하지 않는 N개체가 N개의 병렬 환경 롤아웃으로 작용하며, 샘플당 유효 스텝 사이즈가 alpha = 1/N임을 보임
  • 분산형 사회적 모방에서 로컬 개인 간 상호작용과 글로벌 정책 업데이트를 연결하기 위해 진화 복제자 동역학(evolutionary replicator dynamics)을 적용함
  • 단순한 비학습 개체로부터 집단 수준에서 시행착오 학습이 어떻게 발생하는지에 대한 형식적 메커니즘을 제공함
  • 사회적 및 경제적 시스템의 모방 동역학을 분석하고 확장 가능한 분산형 스웜 로봇 알고리즘을 설계하는 도구를 제시함

이 한국어 요약은 AI가 자동으로 만들었습니다. 원문의 주장과 맥락은 원문에서 확인해 주세요. 저작권은 원저작자에게 있습니다.

AI 처리 방식을 확인하거나, 요약 오류와 출처 표기 문제, 삭제 요청을 문의 · 건의로 알려주세요.