ЖИ боттарының анықтамалығы

anthropic-ai: бұл қандай бот және оны қалай ашуға не жабуға болады

anthropic-ai — ЖИ модельдерін оқыту үшін беттерді жинайтын Anthropic боты. Ол Claude іздеу арқылы беретін жауаптарына әсер етпейді: оны ЖИ іздеуіндегі көрінуді жоғалтпай жабуға болады.

оқыту Claude · Anthropic

anthropic-ai User-Agent

Толық User-Agent жолын Anthropic бот құжаттамасында жариялайды. robots.txt үшін anthropic-ai токені жеткілікті.

Сайтты anthropic-ai үшін қалай ашуға болады

Бұл топты сайт түбіріндегі robots.txt-ке қосыңыз. Қызметтік бөлімдерді осы топта жабыңыз: өз тобы бар бот «User-agent: *» ережелерін оқымайды.

User-agent: anthropic-ai
Allow: /

robots.txt — бәрі емес. Сайтта Cloudflare немесе боттардан басқа қорғаныс тұрса, robots.txt бәріне рұқсат етсе де, ол anthropic-ai ботына 403 қатесін немесе тексеру бетін беруі мүмкін.

Сайтты anthropic-ai ботынан қалай жабуға болады

Бүкіл сайтты жабу үшін robots.txt-ке төмендегі топты қосыңыз. Ереже robots.txt-ті сақтайтын боттар үшін жұмыс істейді.

User-agent: anthropic-ai
Disallow: /

anthropic-ai жабылса, не болады

Модельдердің жаңа нұсқалары беттеріңізден үйренбейді. Іздеу арқылы берілетін жауаптардағы көріну өзгермейді — оған іздеу боттары жауап береді.

anthropic-ai сайтқа кіре ме, қалай тексеруге болады

Веб-сервер логтарынан токенді іздеңіз. User-Agent жолын жалғандау оңай, сондықтан сенімді болу үшін IP мекенжайын ауқымдармен салыстырыңыз, егер Anthropic оларды жарияласа.

grep "anthropic-ai" /var/log/nginx/access.log

Сайтыңыз anthropic-ai ботын кіргізе ме

15 секундтық тегін тексеру: robots.txt-ті оқып, сайтты ЖИ боттарының атынан сұраймыз — сервер мен қорғаныс қайсысын кіргізіп, қайсысын кіргізбейтіні көрінеді.

Сайтты тексеру

Claude басқа боттары

Барлық ЖИ боттары және robots.txt ережелері →

Сұрақтар мен жауаптар

anthropic-ai ботын жабу керек пе?

Өзіңіз шешесіз. anthropic-ai ботын жабу сайтты іздеу арқылы берілетін ЖИ жауаптарынан алып тастамайды, бірақ модельдер де сіз туралы оқыту кезінде білмейді. Контент — басты активіңіз болса, жабыңыз; танымалдылық маңызды болса, ашық қалдырыңыз.

anthropic-ai сайтқа кіретінін қалай білуге болады?

Веб-сервер логтарынан токенді іздеңіз. User-Agent жолын жалғандау оңай, сондықтан сенімді болу үшін IP мекенжайын ауқымдармен салыстырыңыз, егер Anthropic оларды жарияласа.

robots.txt-те anthropic-ai ботын ашу жеткілікті ме?

robots.txt — бәрі емес. Сайтта Cloudflare немесе боттардан басқа қорғаныс тұрса, robots.txt бәріне рұқсат етсе де, ол anthropic-ai ботына 403 қатесін немесе тексеру бетін беруі мүмкін.