Справочник ботов ИИ

bingbot: что это за бот и как его открыть или закрыть

bingbot — поисковый бот Microsoft: находит и читает страницы, чтобы Microsoft Copilot мог найти ваш сайт и сослаться на него в ответе. Если его закрыть, сайт пропадёт из таких ответов.

поиск Microsoft Copilot · Microsoft

User-Agent bingbot

Так bingbot представляется в запросах к сайту. В robots.txt пишут только токен — bingbot.

Mozilla/5.0 (compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm)

Официальное описание бота →

Bing и Copilot

Как открыть сайт для bingbot

Добавьте группу в robots.txt в корне сайта. Служебные разделы закройте в ней же: бот со своей группой не читает правила «User-agent: *».

User-agent: bingbot
Allow: /

robots.txt — ещё не всё. Если на сайте стоит Cloudflare или другая защита от ботов, она может отдавать bingbot ошибку 403 или страницу-проверку, даже когда robots.txt всё разрешает.

Как закрыть сайт от bingbot

Чтобы закрыть весь сайт, добавьте в robots.txt группу ниже. Правило действует для ботов, которые соблюдают robots.txt.

User-agent: bingbot
Disallow: /

Что будет, если закрыть bingbot

Microsoft Copilot перестанет находить и читать ваши страницы: в ответах с поиском сайт не появится, а ссылок на него ассистент давать не будет.

Как проверить, заходит ли bingbot на сайт

Найдите токен в логах веб-сервера. Строку User-Agent легко подделать, поэтому для уверенности сверяйте IP-адрес с диапазонами, если Microsoft их публикует.

grep "bingbot" /var/log/nginx/access.log

Пускает ли ваш сайт bingbot

Бесплатная проверка за 15 секунд: читаем ваш robots.txt и запрашиваем сайт от имени ботов ИИ — видно, кого пускают сервер и защита, а кого нет.

Проверить сайт

Вопросы и ответы

Нужно ли закрывать bingbot?

Нет, если вы хотите, чтобы Microsoft Copilot находил и рекомендовал ваш сайт. Закрывать поисковых ботов имеет смысл только для страниц, которые не должны попадать в ответы.

Как узнать, заходит ли bingbot на сайт?

Достаточно ли открыть bingbot в robots.txt?