ChetverBot
сайттарды тексеретін бот
ChetverBot — Chetver сайт тексерушісі. Ол жалпыға қолжетімді беттер мен файлдарды оқып, олардың қолжетімділігін, мазмұны мен құрылымын тексереді. Нәтижелер Chetver ішінде көрсетіледі.
- User-Agent
ChetverBot/1.0 (+https://chetver.com/bot)- robots.txt
User-agent: ChetverBot
ChetverBot кіруі — Chetver тексеруі. Бұл ChatGPT, Claude, Gemini немесе Perplexity сайтыңызға кірді не оны ұсынды дегенді білдірмейді.
ChetverBot-ты қалай тануға болады
сұраудағы қолтаңба бойынша
ChetverBot мына User-Agent мәнін жібереді:
ChetverBot/1.0 (+https://chetver.com/bot)robots.txt ішінде ол мына топтың ережелерін орындайды: User-agent: ChetverBot. Мұндай топ болмаса, мына топтың ережелері қолданылады: User-agent: *.
ChetverBot Google Cloud-та жұмыс істейді. Біз тұрақты IP мекенжайлар тізімін жарияламаймыз. User-Agent боттың атауын көрсетеді, бірақ оны кез келген адам көшіре алады; ол жіберушінің кім екенін растамайды.
Ол нені және қаншалықты жиі оқиды
тек жалпыға қолжетімді беттер мен файлдар
Әр тексерудің өз себебі мен өз көлемі бар. ChetverBot сайтқа мына жағдайларда келеді.
Сайт дайындығы
Қосылған сайттың 30 бетіне дейін төлемнен кейін, апта сайын және иесі қайта тексеруді сұрағанда.
Күнделікті қолжетімділік тексеруі
Тексеру қолжетімді белсенді сайттардың басты беті және robots.txt, sitemap.xml, llms.txt файлдары.
AI Page
Иесі жасағанда немесе жаңартқанда 30 бетке дейін, сондай-ақ тарифке қарай әр 7 немесе 30 күн сайын автоматты түрде.
Маңызды беттер
Иесі таңдаған беттер, ол тексеруді іске қосқанда.
Тегін тексеру
Біреу chetver.com сайтында тексеруді сұрағанда басты бет, robots.txt және sitemap.xml.
ChetverBot JavaScript орындамай, пішіндер толтырмай, тіркелгіге кірмей және тапсырыс бермей жалпыға қолжетімді жауаптарды оқиды. Ол сайтыңызда ештеңе өзгертпейді.
Ол robots.txt ережелерін қалай ескереді
және файл қолжетімсіз болса не болады
Бетті оқымас бұрын ChetverBot robots.txt файлын тексеріп, тыйым салынған жолдарды өткізіп жібереді. Тексерілмеген дайындық тармақтары белгісіз болып қалады, оларға нөл ұпай берілмейді.
Ережелер 60 минутқа дейін кэште сақталады. Өзгерістен кейін осы уақыттың өтуін күтіңіз. Басқа жолдарға тыйым салынса да, ChetverBot robots.txt файлының өзін оқи алады.
robots.txt қолжетімсіз болса, сайттың дайындық тексеруі тоқтайды. Файл жүктелмесе, басқа тексерулер robots.txt ережелерінсіз жалғасуы мүмкін; Chetver бұл ақауды тіркейді.
Chetver клиенттің aipage қосалқы доменінде өзі орналастырған AI Page қолжетімділігін де тексереді. Бұл тексеру бетке кірер алдында robots.txt файлын оқымайды.
Рұқсат беру немесе тыйым салу
өзіңіз шешесіз
ChetverBot-қа рұқсат беру
robots.txt файлына мына топты қосыңыз:
User-agent: ChetverBot
Allow: /ChetverBot-қа тыйым салу
Бүкіл сайтқа тыйым салу:
User-agent: ChetverBot
Disallow: /Немесе жеке бөлімдерге тыйым салу:
User-agent: ChetverBot
Disallow: /checkout/
Disallow: /account/Chetver тыйым салынған беттерді тексере алмайды және бұл тексерулерді қолжетімсіз деп белгілейді.
Желіаралық экран, Cloudflare және сұрау жиілігі шектеулері
Хостингтің желіаралық экраны немесе қауіпсіздік плагині ChetverBot-ты бұғаттаса, бұғатталған сұрауды қарап, тек тексергіңіз келетін жалпыға қолжетімді беттерге рұқсат беріңіз.
Cloudflare ішінде Skip ережесі арқылы Super Bot Fight Mode үшін ерекшелік жасауға болады. Оны ChetverBot User-Agent мәні бар, жалпыға қолжетімді беттерге арналған GET сұрауларымен шектеп, тек Super Bot Fight Mode тексеруін өткізіп жіберіңіз. Басқарылатын ережелерді, сұрау жиілігі шектеулерін және басқа қауіпсіздік ережелерін қосулы қалдырыңыз.
Сұрау жиілігі шектеуі тексеруді бұғаттаса, шегін қайта қараңыз немесе ережені қажетті жалпыға қолжетімді жолдармен шектеңіз. Кіру, төлем, тіркелгі және пішін беттері кез келген User-Agent үшін қорғалған болуы керек.
Cloudflare-дің жеке ережесі Bot Fight Mode тексеруін өткізіп жібере алмайды. Ол ChetverBot-ты бұғаттаса, осы мүмкіндікті өшіруді немесе шектеулі ерекшеліктерді қолдайтын бот қорғанысына ауысуды қарастырыңыз.
Cloudflare: Super Bot Fight Mode ерекшеліктері · Bot Fight Mode
ChetverBot туралы сұрақтарыңыз бар ма?
бізге жазыңыз
Сайтыңыздың мекенжайы мен мәселенің сипаттамасын мына мекенжайға жіберіңіз: support@chetver.com