AI 봇, 대학 도서관 일일 검색 11,000건 폭주

AI scraper bots swarm university libraries, blocking users

·2026.11.14 23:51

핵심 내용

AI 봇이 대학 도서관 트래픽을 급증시켜 사용자 접속을 차단했다.

자세히 보기

  • AI 스크레이퍼 봇이 대학 도서관 시스템을 압도해 학생과 교직원의 접속을 차단하고 있음. UNC Chapel Hill은 수천 개의 IP 주소에서 하루 동안 핀란드 음악 관련 검색 11,000건 이상을 기록함.
  • 2025년 GLAM-E Lab이 온라인 문화 컬렉션 관리자 43명을 대상으로 진행한 설문조사에서 39명이 전년 대비 트래픽 증가를 보고함. 이 중 27명은 AI 학습 데이터 봇을 증가 원인으로 지목함.
  • 봇은 robots.txt를 무시하고 초당 수천 건의 문서를 요청하며 모든 가용 형식으로 콘텐츠를 다운로드함. 이로 인해 사이트가 완전히 다운되는 경우도 발생함.
  • Anthropic, OpenAI, Google, Microsoft는 표준화된 robots.txt 옵트아웃 신호를 지원하지만, 준수는 자발적이며 소규모 AI 스타트업이나 제3자 스크레이퍼에는 적용되지 않음.

이 한국어 요약은 AI가 자동으로 만들었습니다. 원문의 주장과 맥락은 원문에서 확인해 주세요. 저작권은 원저작자에게 있습니다.

AI 처리 방식을 확인하거나, 요약 오류와 출처 표기 문제, 삭제 요청을 문의 · 건의로 알려주세요.