Forside › Vidensbase › seo.cat.crawler
OAI-SearchBot og ChatGPT-User
Når ChatGPT søger på nettet, henter OAI-SearchBot og ChatGPT-User sider — adskilt fra træningscrawleren GPTBot.
To bots, to opgaver
OAI-SearchBot opbygger søgeindekset til ChatGPT-søgningen. ChatGPT-User åbner en side, når en bruger udtrykkeligt beder om det i sit spørgsmål eller deler et link. Begge leverer grundlaget for citerede svar med kildelink.
Hvorfor du bør tillade dem
Den, der vil vises som kilde i ChatGPT, skal give disse to bots adgang. En spærring kun for GPTBot lader søgningen være urørt; en spærring for ”User-agent: *” rammer også OAI-SearchBot.
robots.txt-reglen
For maksimal synlighed: en blok hver for ”User-agent: OAI-SearchBot” og ”User-agent: ChatGPT-User”, begge med ”Allow: /”. Undtag følsomme områder (login, indkøbskurv, intern søgning) målrettet med Disallow.
Test tilgængelighed
citeglass kontrollerer separat for OAI-SearchBot og ChatGPT-User, om robots.txt tillader dem, og om din server faktisk leverer indhold til dem — inklusive de tilfælde, hvor en botbeskyttelse blokerer dem trods tilladt robots.txt.
Tjek dit eget site
citeglass viser på cirka 30 sekunder, hvor dit website er ulæsbart for AI-systemer — gratis og uden login.
Læs videre
Generel information, ikke juridisk rådgivning. GEO er et ungt felt — anbefalinger kan ændre sig.