Опубликовано 09.11.2026
4 ноября Cloudflare показал ИИ-агентов в аналитике и дал правило для каждого: пускать, блокировать на страницах с рекламой или блокировать. Если вы когда-то включали «Block AI bots», агенты у вас, скорее всего, уже закрыты на страницах с рекламой.
4 ноября 2026 года Cloudflare добавил в панель отдельную категорию трафика для ИИ-агентов и правила для каждого из них. Агентом Cloudflare называет бота, который работает за человека прямо сейчас: например, ассистент открывает страницу по просьбе пользователя или ИИ-браузер сам ходит по сайту.
Что изменилось
- Видно каждого агента. В аналитике ботов появилась категория «Personal Assistants» и список агентов: сколько запросов, какие страницы, какие коды ответа.
- Правило для каждого агента. Настройка теперь называется «AI Crawler and Agent access policies». Для каждого поддерживаемого агента можно выбрать: пускать, блокировать на страницах с рекламой или блокировать. По умолчанию агент получает общее правило для агентов.
- Вопрос о рекламе. При подключении сайта Cloudflare спрашивает, есть ли на нём реклама, и от ответа зависят рекомендуемые настройки.
Каких именно агентов это касается и на каких тарифах доступно, Cloudflare не пишет.
Кого это может задеть
- Новые сайты с рекламой. С 15 сентября Cloudflare рекомендует им блокировать агентов на страницах с рекламой и запрещать обучение. Поиск остаётся открытым.
- Сайты, где когда-то включили «Block AI bots». При переходе на новые настройки у них агенты сами получили блок на страницах с рекламой.
- Остальные старые сайты. У них, по словам Cloudflare, ничего не поменялось.
Что это значит на практике: сайт может попадать в ответы ИИ через поисковых ботов, но если человек попросит ассистента открыть конкретную страницу с рекламой, тот может получить отказ.
Что проверить
- Настройку агентов. Откройте в Cloudflare «AI Crawler and Agent access policies» и посмотрите, что выбрано для агентов в целом и для каждого.
- Аналитику. В категории «Personal Assistants» видно, каким агентам сайт отвечает отказом.
- Нужен ли блок вообще. Если сайт зарабатывает не на рекламе, а на заявках и продажах, закрывать агентов обычно незачем: за ними стоят живые люди.
Почему Cloudflare это делает
5 ноября Cloudflare опубликовал разбор: когда агент работает за человека, сайт видит только агента, а спорные покупки, злоупотребления и чтение без показа рекламы оплачивает сайт. Cloudflare предлагает подписывать запросы агентов (Web Bot Auth) и собирает группу Trusted Agent Delegation, чтобы вынести вопрос в IETF. Учтите: Cloudflare сам продаёт защиту от ботов.
Проверьте свой сайт
Бесплатная проверка aiseen.cloud покажет, что ваш сайт отвечает ботам ChatGPT, Claude, Perplexity и других ИИ. Наши запросы идут не с адресов OpenAI или Anthropic, поэтому настройки агентов в Cloudflare лучше посмотреть и в самой панели.
Источники: Cloudflare, 4 ноября, Cloudflare, 5 ноября, Cloudflare, 15 сентября.