Сайтыңызды қай AI оқиды және оларға не кедергі келтіреді
Chetver ChatGPT, Claude, Gemini, Perplexity және басқа AI боттарының қайсысы сайтыңызға кіретінін, не үшін келетінін, нені оқитынын — және қай жерде тыйымға не қатеге тап болатынын көрсетеді.
Тексеру — аккаунтсыз және картасыз. Бот сұраулары — сайтты қосқаннан кейін, айына $29-дан бастап.
Kkvitkova-lavka.exampleAI-боттардың сұраулары
AI-боттардың сұраулары
kvitkova-lavka.example · 29 қыркүйек, сейсенбідегі деректер
AI‑боттар қаншалықты жиі кіреді
30 күн · 31 там – 29 қыр1–30 таммен салыстырғанда
4 812сұрау
+18%алдыңғы 30 күнде — 4 071
Бір ай бұрынғыдан 741 сұрау көп. Ең көп қосқандар — OpenAI-дың ChatGPT боттары (+348) және Anthropic-тің Claude боттары (+216).
Соңғы 30 күнАлдыңғы 30 күн
Жазба
Демалыс күндері сұраулар шамамен төрттен бірге аз — бұл қалыпты жағдай.
13 қыр · WordPress‑плагин қосылды — содан бері сұраулардың бір бөлігін пиксель емес, сол санайды, сондықтан график секірмеді
221 қыр · AI Page-дің жаңа нұсқасы жарияланды ·
327 қыр · Сіздің жазбаңыз: «Қызғалдақтар бетін алып тастадық»
Бәрі дұрыс па
Қолжетімділік ашықБоттарға арналған ережелер файлы (robots.txt) ChatGPT, Claude және Perplexity боттарын кіргізеді · бүгін тексерілді
8 бетте қате барБоттар оларда «табылмады» немесе сервер қатесін алды ·
KAI-боттардың сұраулары
AI-боттардың сұраулары
kvitkova-lavka.example · 29 қыркүйек, сейсенбідегі деректер
AI‑боттар қаншалықты жиі кіреді
30 күн · 31 там – 29 қыр1–30 таммен салыстырғанда
4 812сұрау
+18%алдыңғы 30 күнде — 4 071
Бір ай бұрынғыдан 741 сұрау көп. Ең көп қосқандар — OpenAI-дың ChatGPT боттары (+348) және Anthropic-тің Claude боттары (+216).
Соңғы 30 күнАлдыңғы 30 күн
13 қыр · WordPress‑плагин қосылды — содан бері сұраулардың бір бөлігін пиксель емес, сол санайды, сондықтан график секірмеді
Мысал деректер: ойдан шығарылған kvitkova-lavka.example дүкені, Max тарифі, 30 күн. Бот сұрауы — адамның кіруі емес және AI‑жауаптағы ұсыныс емес.
Компаниялар бойынша боттарPro және Max
Кім келеді және қай AI жоқ
Әр компания қанша сұрау жасағанын, бір айда бұл қалай өзгергенін және соңғы рет қашан кіргенін көресіз. Жаңа бот белгіленеді, ал кірмеген басты AI тізімнің төменгі жағында тұрады.
Алты басты AI:OChatGPTAClaudeGGeminiPPerplexityMCopilotMiLe Chatсондай-ақ ByteDance, Apple, Amazon, Meta боттары
Кім келеді
9 компанияның 14 боты · 30 күн
КомпанияСұрауларӨзгерісСоңғы кіру
OOpenAIChatGPT · 3 бот2 33649%+3484 мин бұрынAAnthropic
жаңа бот · 26 қырClaude · 3 бот1 02821%+21612 мин бұрынPPerplexityPerplexity AI‑іздеуі · 2 бот53311%+8138 мин бұрынGGoogleGoogle іздеуі және Gemini · 1 бот3778%+99 мин бұрынMMicrosoftBing және Copilot · 1 бот1984%+671 сағ бұрын+Басқа компанияларByteDance (TikTok), Apple, Amazon, Meta · 4 бот3407%+205 сағ бұрын
MiMistralLe Chat——30 күнде кірмеген
Бот атауын оның қолтаңбасынан (User-Agent) аламыз — оны жасанды түрде өзгертуге болады. Біз танымаған боттар мұнда жоқ.
Кім келеді
9 компанияның 14 боты · 30 күн
OOpenAIChatGPT · 3 бот2 33649% · өзгеріс +348 · соңғы рет 4 мин бұрынAAnthropic
жаңа бот · 26 қырClaude · 3 бот1 02821% · өзгеріс +216 · соңғы рет 12 мин бұрынPPerplexityPerplexity AI‑іздеуі · 2 бот53311% · өзгеріс +81 · соңғы рет 38 мин бұрынGGoogleGoogle іздеуі және Gemini · 1 бот3778% · өзгеріс +9 · соңғы рет 9 мин бұрынMMicrosoftBing және Copilot · 1 бот1984% · өзгеріс +67 · соңғы рет 1 сағ бұрын+Басқа компанияларByteDance (TikTok), Apple, Amazon, Meta · 4 бот3407% · өзгеріс +20 · соңғы рет 5 сағ бұрын
MiMistralLe Chat—30 күнде кірмеген
Бот атауын оның қолтаңбасынан (User-Agent) аламыз — оны жасанды түрде өзгертуге болады. Біз танымаған боттар мұнда жоқ.
Мысал · kvitkova-lavka.example · 30 күн
Бот түрлеріPro және Max
Не үшін келеді және адамдар сұрағанда AI нені ашады
Кейбір боттар AI-ды сайт мәтіндерімен оқытады, басқалары AI‑іздеуге каталог жасайды. Ал нақты уақыттағы сұрау кезінде ассистент адаммен сөйлесіп отырып беттерді ашады — қай беттер екені көрінеді.
Боттар не үшін келеді
Боттардың 4 түрі · 30 күн
Оқыту2 517+341
AI үйренетін мәтіндерді жинайды. Әсері — бірнеше айдан кейін, AI-дың жаңа нұсқасы шыққанда.
GPTBot, ClaudeBot, Bytespider, Meta-ExternalAgent
Іздеу1 709+282
AI‑іздеу сізді тауып, сілтеме бере алуы үшін беттер каталогын жасайды. Google мен Bing іздеу боттары да осында.
Ассистент адамға жауап беру үшін біреумен сөйлесу барысында бетті ашады.
ChatGPT-User, Claude-User, Perplexity-User
Басқа41+5
Бот не үшін келетінін хабарламайды.
Amazonbot
AI сөйлесу кезінде нені аштынақты уақыттағы сұраулар · 30 күн
AI көбінесе жеткізу мен бағалар бетін ашты. Негізінен бұл — ChatGPT, сирегірек — Perplexity мен Claude.
Тағы 18 бет134
Дүкен туралы ChatGPT, Claude немесе Perplexity-мен өз сөйлесулеріңіз де нақты уақыттағы сұрауларға түседі.
Дүкенге бәрін кіргізген тиімді: оқыту — AI сіз туралы алдағы уақытта білуі үшін, іздеу мен нақты уақыттағы сұраулар — сізді қазір-ақ атай алуы үшін.
AI сөйлесу кезінде нені аштынақты уақыттағы сұраулар · 30 күн
AI көбінесе жеткізу мен бағалар бетін ашты. Негізінен бұл — ChatGPT, сирегірек — Perplexity мен Claude.
Тағы 18 бет134
Дүкен туралы ChatGPT, Claude немесе Perplexity-мен өз сөйлесулеріңіз де нақты уақыттағы сұрауларға түседі.
Мысал · kvitkova-lavka.example · 30 күн
robots.txt және қателер
Боттарға не кедергі келтіреді және оны қалай түзету керек
robots.txt файлын — боттарға арналған ережелер файлын — күн сайын тексереміз. Ол ChatGPT, Claude немесе Perplexity боттарына жолды жапса, графиктегі белгі сұраулардың қай күннен бастап азайғанын, ал «Нені жақсарту керек» нені түзету керегін көрсетеді.
AI‑боттар қаншалықты жиі кіреді
30 күн · 31 там – 29 қыр1–30 таммен салыстырғанда
3 412сұрау
−16%алдыңғы 30 күнде — 4 071
659 сұрау аз. 22 қыркүйектен бастап боттарға арналған ережелер файлы (robots.txt) Claude мен Perplexity боттарын кіргізбейді, сондықтан олар кіруін тоқтатты. OpenAI, Google және Microsoft боттары — бұрынғыдай.
Соңғы 30 күнАлдыңғы 30 күн
Жазба
Демалыс күндері сұраулар шамамен төрттен бірге аз — бұл қалыпты жағдай.
13 қыр · WordPress‑плагин қосылды — содан бері сұраулардың бір бөлігін пиксель емес, сол санайды, сондықтан график секірмеді
221 қыр · AI Page-дің жаңа нұсқасы жарияланды
322 қыр · robots.txt өзгертілді: Claude мен Perplexity боттарына жол жабылды
427 қыр · Сіздің жазбаңыз: «Қызғалдақтар бетін алып тастадық»
Бәрі дұрыс па
Claude мен Perplexity боттарына жол жабықrobots.txt-те 22 қырдан бері осылай бапталған · бүгін тексерілді
8 бетте қате барБоттар оларда «табылмады» немесе сервер қатесін алды ·
AI‑боттар қаншалықты жиі кіреді
30 күн · 31 там – 29 қыр1–30 таммен салыстырғанда
3 412сұрау
−16%алдыңғы 30 күнде — 4 071
659 сұрау аз. 22 қыркүйектен бастап боттарға арналған ережелер файлы (robots.txt) Claude мен Perplexity боттарын кіргізбейді, сондықтан олар кіруін тоқтатты. OpenAI, Google және Microsoft боттары — бұрынғыдай.
Соңғы 30 күнАлдыңғы 30 күн
Жазба
13 қыр · WordPress‑плагин қосылды — содан бері сұраулардың бір бөлігін пиксель емес, сол санайды, сондықтан график секірмеді
221 қыр · AI Page-дің жаңа нұсқасы жарияланды
322 қыр · robots.txt өзгертілді: Claude мен Perplexity боттарына жол жабылды
427 қыр · Сіздің жазбаңыз: «Қызғалдақтар бетін алып тастадық»
Мысал · «Қолжетімділік жабық» сценарийі · 30 күн · график — Pro-дан бастап
Қатесі бар беттер.
Бет боттарға «табылмады» немесе сервер қатесін қайтарса, «Беттер» (Pro-дан бастап) қай бет екенін, қанша рет және қай күннен бастап екенін көрсетеді. Қателер WordPress‑плагин, PHP‑коннектор және AI Page арқылы көрінеді — пиксель оларды көрмейді.
Basic-те де бар.
robots.txt-тегі тыйымды және ашылмайтын беттерді «Нені жақсарту керек» көрсетеді: оларды басты беттің күнделікті тексеруі мен сайттың апталық тексеруі табады. Тексеруден шыққан жаңа міндеттер туралы хаттарды да қосуға болады — тәулігіне бір реттен жиі емес.
Не істеу керекMax
Күн сайын таңертең шешімдер не бұзылды және қайда түзету керек
Бет боттарға сервер қатесін немесе бірнеше рет «табылмады» деп қайтарса, таңертең «Шұғыл» шешім пайда болады: не болды, қай күннен бастап және оны қайда түзету керек.
Сізді күтуде
AI‑боттардың сұрауларында не өзгерді және онымен не істеу керек
Бүгін таңертең жаңартылдыкүн сайын таңертең қараймыз
2 шұғыл шешімдер
аптада +2 жаңа
Боттар екі бетті — «Қызғалдақтар» мен «Акцияларды» — аша алмайды. Сайтта нені өзгерту керегін «Нені жақсарту керек» айтады; түзеткен бойда бұл шешімдер өздігінен жабылады.
Қалғанының бәрі дұрыс: бот сұраулары азайып жатқан жоқ, деректер барлық дереккөзден түсіп тұр.
Шұғыл
Боттар «Қызғалдақтар» бетін аша алмайды
Боттар екі күнде 37 рет «табылмады» деген жауап алды, ал әдетте бүкіл сайтта мұндай қате күніне біреуге де жетпейді. Каталогтағы «Қызғалдақтар» сілтемесі әлі де алынып тасталған бетке апарады.
/katalog/tiulpany28 қырдан бастапмекенжай жұмыс істей бастаған бойда өздігінен жабылады — қайта бағыттау да жарайды
«Акциялар» беті боттарға сервер қатесін қайтарады
Боттар бет орнына қате алады, бірақ бұрын ол қатесіз ашылатын. Бәлкім, оны сатып алушылар да көрмейді.
/aktsii28 қырдан бастапбет ашыла бастаған бойда өздігінен жабылады
30 күнде жабылғаны · 1
Сізді күтуде
AI‑боттардың сұрауларында не өзгерді және онымен не істеу керек
Бүгін таңертең жаңартылды
2 шұғыл шешімдер
аптада +2 жаңа
Боттар екі бетті — «Қызғалдақтар» мен «Акцияларды» — аша алмайды. Сайтта нені өзгерту керегін «Нені жақсарту керек» айтады; түзеткен бойда бұл шешімдер өздігінен жабылады.
Қалғанының бәрі дұрыс: бот сұраулары азайып жатқан жоқ, деректер барлық дереккөзден түсіп тұр.
Шұғыл
Боттар «Қызғалдақтар» бетін аша алмайды
Боттар екі күнде 37 рет «табылмады» деген жауап алды, ал әдетте бүкіл сайтта мұндай қате күніне біреуге де жетпейді. Каталогтағы «Қызғалдақтар» сілтемесі әлі де алынып тасталған бетке апарады.
/katalog/tiulpany28 қырдан бастапмекенжай жұмыс істей бастаған бойда өздігінен жабылады — қайта бағыттау да жарайды
Мысал · kvitkova-lavka.example · 29 қыркүйек
Өздігінен жабылады.
Мәселе жойылғанда шешім өздігінен жабылады. Шұғыл емес пе? Бір аптаға кейінге қалдырыңыз немесе «мәселе емес» деп алып тастаңыз.
Апталық хат.
Әр дүйсенбі сайын онда — үшке дейін ашық шешім, шұғылдары бірінші.
WordPress · PHP · пиксельӘр тарифте
2 минутта қосу сайт WordPress-те болса
Chetver Connect плагині әзірлеушісіз орнатылады: оны кабинеттен жүктеп алып, WordPress-ке орнатыңыз да, қосылым кодын енгізіңіз. Сайт WordPress-те болмаса — PHP‑коннектор (оны әзірлеуші баптайды) немесе пиксель.
WordPress‑плагинWordPress-ке келген әр бот сұрауын және бет ашылды ма, соны көреді.Қосылмаған2 минут аладыЖию
1
Плагинді WordPress-ке орнатыңыз
Плагиндер → Жаңасын қосу → Плагинді жүктеу: файлды таңдап, «Орнату», содан кейін «Белсендіру» түймесін басыңыз. WordPress 6.5 және одан жаңа нұсқаларға жарайды.
2
Қосылым кодын жасаңыз
Код 15 минут жарамды, тек kvitkova-lavka.example үшін және тек бір рет.
3
Кодты WordPress-ке енгізіңіз
Баптаулар → Chetver Connect: кодты енгізіп, «Тексеру және қосу» түймесін басыңыз. Деректер жіберіле бастағанын осы беттің өзі көрсетеді.
Сайтпен әзірлеуші айналыса ма? Оған нұсқаулықты көшіріп береміз — оны плагин файлымен бірге жіберіңіз. Оған Chetver құпиясөзі қажет емес.
Плагин сайт мазмұнын өзгертпейді. Ол нақты нені жіберетіні — мына бөлімде: .
WordPress‑плагинWordPress-ке келген әр бот сұрауын және бет ашылды ма, соны көреді.Қосылмаған2 минут алады
1
Плагинді WordPress-ке орнатыңыз
Плагиндер → Жаңасын қосу → Плагинді жүктеу: файлды таңдап, «Орнату», содан кейін «Белсендіру» түймесін басыңыз. WordPress 6.5 және одан жаңа нұсқаларға жарайды.
2
Қосылым кодын жасаңыз
Код 15 минут жарамды, тек kvitkova-lavka.example үшін және тек бір рет.
3
Кодты WordPress-ке енгізіңіз
Баптаулар → Chetver Connect: кодты енгізіп, «Тексеру және қосу» түймесін басыңыз. Деректер жіберіле бастағанын осы беттің өзі көрсетеді.
Сайтпен әзірлеуші айналыса ма? Оған нұсқаулықты көшіріп береміз — оны плагин файлымен бірге жіберіңіз. Оған Chetver құпиясөзі қажет емес.
Мысал · кабинеттегі алғашқы қосылым
WordPress‑плагин немесе PHP‑коннектор
Көреді: WordPress-ке немесе PHP-ге жеткен әр бот сұрауын және бет ашылды ма, соны көреді.
Көрмейді: WordPress-ке не PHP-ге жетпеген сұрауларды көрмейді: оларға кэш, CDN, сайт қорғанысы немесе веб-сервердің өзі жауап берген.
Плагин мен коннектор тек бет мекенжайын, бот атауын, уақытты және жауап кодын жібереді — IP‑мекенжайсыз, cookies-сіз, мекенжай параметрлерінсіз және форма деректерінсіз — әрі сайтты баяулатпайды. Пиксель беттің әр жүктелуінде іске қосылады, сондықтан адамдардың кіруін де жазады — нақты не жазатыны төмендегі сұрақтарда.
Тарифтер
Қай тарифте не бар AI-боттардың сұраулары үшін
Деректерді әр тарифте жинаймыз. Айырмашылығы — олардың қаншасын көресіз және күн сайын таңертең «Шешімдер» дайындаймыз ба.
Basic
айына $29
AI-боттардың сұраулары үшін
AI-боттардың сұрауларын жинау: пиксель, WordPress‑плагин немесе PHP‑коннектор
«AI-боттардың сұраулары» бетіндегі AI-боттар сұрауларының қорытындысы
Үш плитка: қанша сұрау, боттардың қандай түрлері және қанша қате.
Pro
айына $59
Basic-тен бөлек — AI-боттардың сұраулары үшін
Қай AI-боттар сайттың қай беттерін оқиды
Боттар қай жерде қатеге тап болады
Осы беттің жоғарғы жағындағы бот сұраулары туралы бәрі, «Шешімдерден» басқасы.
Max
айына $99
Pro-дан бөлек — AI-боттардың сұраулары үшін
Күн сайын таңертең шешімдер: не істеу керек
Не бұзылғанын және қайда түзету керегін айтатын кеңестер — күн сайын таңертең және апталық хатта.
«AI-боттардың сұраулары» бетіндегі «AI-боттардың кіруі» блогы осылай көрінеді — әр тарифте
Сайт және кез келген тариф. Сайт WordPress-те болса — кабинеттен Chetver Connect плагинін жүктеп алып, орнатыңыз, кабинетте код жасап, оны плагин баптауларына енгізіңіз, бұл шамамен 2 минут алады. Басқа сайтқа PHP‑коннектор (оны әзірлеуші баптайды) немесе пиксель жарайды. Ал қосалқы домендегі AI Page сұрауларды өзі санайды — оны жариялап, қосалқы доменге бір DNS‑жазба қосқан бойда.
Бұл сайтты баяулата ма?
Жоқ. Сайт келушіге жауап беріп жатқанда плагин мен PHP‑коннектор ештеңе жібермейді: олар оқиғаны кезекке жазып, кейін топтап жібереді. Пиксель — 1×1 өлшемді мөлдір сурет.
Қандай деректер жинайсыздар?
Плагин мен PHP‑коннектор тек AI‑боттардың сұрауларын жібереді — нақты нені, жоғарыда, «2 минутта қосу» бөлімінде айтылған. Пиксель мен AI Page әр сұрауды, оның ішінде адамдардың кіруін де жазады: браузердің не боттың қолтаңбасын (User‑Agent), сұрау келген мекенжайды (referrer), бетті, елі мен қаласын, ал IP‑мекенжайды — тек хеш түрінде.
Бірінші аптада не көремін?
Сұраулар боттар кірген бойда пайда болады: мысалда алғашқы 4 күнде олар 711 болды. Сайтты тексеру (апта сайын 30 бетке дейін) және басты беттің күнделікті тексеруі бірінші күннен жұмыс істейді. Max тарифінде алғашқы «Шешімдер» — бір аптадан кейін, ал өткен аймен салыстыру — екі айлық деректер жиналғанда.
Сұраулар жоқ болса, не істеу керек?
Алдымен «Қосылымдарды» ашыңыз: онда әр дереккөз деректерді соңғы рет қашан жібергені көрінеді. Бәрі жұмыс істеп тұрса, robots.txt файлын тексеріңіз — ол AI‑боттарға жолды жауып тастаған болуы мүмкін (Chetver оны күн сайын тексереді). Жаңа сайтты боттар бірден таппауы мүмкін.
Бұл шынымен GPTBot екенін қайдан білесіздер?
Боттың өзін атайтын қолтаңбасы (User‑Agent) бойынша. Оны жасанды түрде өзгертуге болады, сондықтан біз боттарды «расталған» деп атамаймыз. Танылмаған боттар есептерде жоқ.
Бот сұрауы мені ұсынды дегенді білдіре ме?
Жоқ. Сұрау — боттың бетке автоматты түрде жүгінуі. Ол адамдарды санамайды және AI сізді ұсынғанын дәлелдемейді. Нақты уақыттағы сұрау да тек ассистенттің біреумен сөйлесу кезінде бетті ашқанын білдіреді. AI сіз туралы не жауап беретінін Max тарифіндегі «AI жауаптары» көрсетеді. Әрі боттарды жиірек келуге мәжбүрлей алмаймыз: әр компания нені және қашан оқитынын өзі шешеді.
Сайтыңызды кім оқитынын көріңіз
Тариф таңдаңыз — сайтты қосқан бойда сұрауларды жинай бастаймыз. Ақшаны қайтару үшін 30 күн.