한 번만 말하세요: Bot Preference Sync 소개

Cloudflare는 웹사이트 소유자가 AI 봇 트래픽을 관리할 때 robots.txt 설정과 실제 차단 규칙이 불일치하는 문제를 해결하기 위해 Bot Preference Sync를 출시했다. 이 기능은 사용자가 설정한 AI 봇 구성을 robots.txt에 자동으로 반영하여, 검색, 에이전트, 학습 트래픽에 대한 선호도를 명확히 표명할 수 있게 한다.

2026년 7월 1일부터 모든 고객 등급에서 사용할 수 있으며, **투명성(Transparency)**을 갖춘 봇 운영자에게 혜택을 제공한다. 검색과 학습을 모두 수행하는 봇은 '학습 금지(Disallow Training)' 설정 시에도 차단되지 않으려면 특정 기준을 충족해야 한다.

투명성 기준을 충족하는 주요 AI 모델 및 서비스 제공업체의 봇은 Cloudflare Radar의 AI 봇 투명성 섹션에 공개적으로 추적된다. 반면, 투명성을 제공하지 않는 크롤러는 학습 금지 설정 시에도 예외 없이 차단된다.