Početna › Baza znanja › seo.cat.crawler
OAI-SearchBot i ChatGPT-User
Kada ChatGPT pretražuje web, OAI-SearchBot i ChatGPT-User dohvaćaju stranice — odvojeno od alata za treniranje GPTBot.
Dva bota, dva zadatka
OAI-SearchBot gradi indeks pretraživanja za ChatGPT pretraživanje. ChatGPT-User otvara stranicu kad je korisnik izričito zatraži u svom pitanju ili podijeli poveznicu. Oba pružaju osnovu za citirane odgovore s poveznicom na izvor.
Zašto biste ih trebali dopustiti
Tko se želi pojaviti kao izvor u ChatGPT-u, mora tim dvama botovima dopustiti pristup. Blokada samo za GPTBot ostavlja pretraživanje netaknutim; blokada za „User-agent: *“ pogađa i OAI-SearchBot.
robots.txt pravilo
Za maksimalnu vidljivost: po jedan blok za „User-agent: OAI-SearchBot“ i „User-agent: ChatGPT-User“, oba s „Allow: /“. Osjetljiva područja (prijava, košarica, interno pretraživanje) ciljano isključite putem Disallow.
Testirati dohvatljivost
citeglass za OAI-SearchBot i ChatGPT-User odvojeno provjerava dopušta li ih robots.txt i isporučuje li im vaš poslužitelj doista sadržaj — uključujući slučajeve u kojima ih zaštita od botova blokira unatoč dopuštenom robots.txt-u.
Provjerite vlastitu stranicu
citeglass za oko 30 sekundi pokazuje gdje je vaša web stranica nečitljiva za UI sustave — besplatno i bez prijave.
Pročitaj dalje
Opća informacija, ne pravni savjet. GEO je mlado područje — preporuke se mogu mijenjati.