Acasă › Bază de cunoștințe › seo.cat.crawler
OAI-SearchBot și ChatGPT-User
Când ChatGPT caută pe web, OAI-SearchBot și ChatGPT-User încarcă pagini — separat de crawlerul de antrenare GPTBot.
Doi boți, două sarcini
OAI-SearchBot construiește indexul de căutare pentru căutarea ChatGPT. ChatGPT-User deschide o pagină când un utilizator o cere explicit în întrebarea sa sau partajează un link. Ambii oferă baza pentru răspunsuri citate cu link către sursă.
De ce ar trebui să îi permiteți
Cine vrea să apară ca sursă în ChatGPT trebuie să permită acestor doi boți accesul. O blocare doar pentru GPTBot lasă căutarea neatinsă; o blocare pentru „User-agent: *” afectează și OAI-SearchBot.
Regula robots.txt
Pentru vizibilitate maximă: câte un bloc pentru „User-agent: OAI-SearchBot” și „User-agent: ChatGPT-User”, ambele cu „Allow: /”. Excludeți țintit zonele sensibile (autentificare, coș, căutare internă) cu Disallow.
Testați accesibilitatea
citeglass verifică pentru OAI-SearchBot și ChatGPT-User separat dacă robots.txt îi permite și dacă serverul dvs. le livrează efectiv conținut — inclusiv cazurile în care o protecție anti-bot îi blochează în ciuda robots.txt permis.
Verifică-ți propriul site
citeglass arată în circa 30 de secunde unde site-ul tău este ilizibil pentru sistemele AI — gratuit și fără cont.
Citește mai departe
Informație generală, nu consultanță juridică. GEO este un domeniu tânăr — recomandările se pot schimba.