OAI-SearchBot: бұл қандай бот және оны қалай ашуға не жабуға болады
OAI-SearchBot — OpenAI іздеу боты: ChatGPT сайтыңызды тауып, жауапта оған сілтеме бере алуы үшін беттерді тауып, оқиды. Оны жапсаңыз, сайт мұндай жауаптардан жоғалады.
OAI-SearchBot User-Agent
OAI-SearchBot сайтқа сұрауларда өзін осылай таныстырады. robots.txt-ке тек токен жазылады — OAI-SearchBot.
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko); compatible; OAI-SearchBot/1.0; +https://openai.com/searchbot
Сайтты OAI-SearchBot үшін қалай ашуға болады
Бұл топты сайт түбіріндегі robots.txt-ке қосыңыз. Қызметтік бөлімдерді осы топта жабыңыз: өз тобы бар бот «User-agent: *» ережелерін оқымайды.
User-agent: OAI-SearchBot Allow: /
robots.txt — бәрі емес. Сайтта Cloudflare немесе боттардан басқа қорғаныс тұрса, robots.txt бәріне рұқсат етсе де, ол OAI-SearchBot ботына 403 қатесін немесе тексеру бетін беруі мүмкін.
Сайтты OAI-SearchBot ботынан қалай жабуға болады
Бүкіл сайтты жабу үшін robots.txt-ке төмендегі топты қосыңыз. Ереже robots.txt-ті сақтайтын боттар үшін жұмыс істейді.
User-agent: OAI-SearchBot Disallow: /
OAI-SearchBot жабылса, не болады
ChatGPT беттеріңізді тауып, оқуды тоқтатады: сайт іздеу арқылы берілетін жауаптарда шықпайды, ассистент оған сілтеме бермейді.
OAI-SearchBot сайтқа кіре ме, қалай тексеруге болады
Веб-сервер логтарынан токенді іздеңіз. User-Agent жолын жалғандау оңай, сондықтан сенімді болу үшін IP мекенжайын ауқымдармен салыстырыңыз, егер OpenAI оларды жарияласа.
grep "OAI-SearchBot" /var/log/nginx/access.log
Сайтыңыз OAI-SearchBot ботын кіргізе ме
15 секундтық тегін тексеру: robots.txt-ті оқып, сайтты ЖИ боттарының атынан сұраймыз — сервер мен қорғаныс қайсысын кіргізіп, қайсысын кіргізбейтіні көрінеді.
ChatGPT басқа боттары
ChatGPT-Userсұрау бойыншаGPTBotоқыту
Сұрақтар мен жауаптар
OAI-SearchBot ботын жабу керек пе?
Жоқ, егер ChatGPT сайтыңызды тауып, ұсынғанын қаласаңыз. Іздеу боттарын тек жауаптарға түспеуі керек беттер үшін жапқан жөн.
OAI-SearchBot сайтқа кіретінін қалай білуге болады?
Веб-сервер логтарынан токенді іздеңіз. User-Agent жолын жалғандау оңай, сондықтан сенімді болу үшін IP мекенжайын ауқымдармен салыстырыңыз, егер OpenAI оларды жарияласа.
robots.txt-те OAI-SearchBot ботын ашу жеткілікті ме?
robots.txt — бәрі емес. Сайтта Cloudflare немесе боттардан басқа қорғаныс тұрса, robots.txt бәріне рұқсат етсе де, ол OAI-SearchBot ботына 403 қатесін немесе тексеру бетін беруі мүмкін.