AI 봇, 대학 도서관 일일 검색 11,000건 폭주
AI scraper bots swarm university libraries, blocking users
·2026.11.14 23:51
핵심 내용
AI 봇이 대학 도서관 트래픽을 급증시켜 사용자 접속을 차단했다.
자세히 보기
- AI 스크레이퍼 봇이 대학 도서관 시스템을 압도해 학생과 교직원의 접속을 차단하고 있음. UNC Chapel Hill은 수천 개의 IP 주소에서 하루 동안 핀란드 음악 관련 검색 11,000건 이상을 기록함.
- 2025년 GLAM-E Lab이 온라인 문화 컬렉션 관리자 43명을 대상으로 진행한 설문조사에서 39명이 전년 대비 트래픽 증가를 보고함. 이 중 27명은 AI 학습 데이터 봇을 증가 원인으로 지목함.
- 봇은 robots.txt를 무시하고 초당 수천 건의 문서를 요청하며 모든 가용 형식으로 콘텐츠를 다운로드함. 이로 인해 사이트가 완전히 다운되는 경우도 발생함.
- Anthropic, OpenAI, Google, Microsoft는 표준화된 robots.txt 옵트아웃 신호를 지원하지만, 준수는 자발적이며 소규모 AI 스타트업이나 제3자 스크레이퍼에는 적용되지 않음.
이 한국어 요약은 AI가 자동으로 만들었습니다. 원문의 주장과 맥락은 원문에서 확인해 주세요. 저작권은 원저작자에게 있습니다.