Povoliť alebo blokovať GPTBot

GPTBot je prehľadávač, ktorým OpenAI zhromažďuje verejne dostupný obsah na tréning budúcich modelov.

Za čo GPTBot zodpovedá

GPTBot načítava stránky pre tréningové dáta — nie na zodpovedanie konkrétnej otázky používateľa v ChatGPT. Za živé vyhľadávanie v ChatGPT zodpovedajú OAI-SearchBot a ChatGPT-User. Kto blokuje GPTBot, ale chce zostať viditeľný v AI vyhľadávaní, musí tieto dva naďalej povoliť.

Povoliť

Vlastný blok dáva GPTBotu plný prístup: „User-agent: GPTBot“ nasledované „Allow: /“. Dôležité: blok špecifický pre bota nahrádza pre GPTBot blok „User-agent: *“ úplne — potrebné pravidlá Disallow tam zopakujte.

Blokovať

„User-agent: GPTBot“ nasledované „Disallow: /“ drží GPTBot mimo celej domény. OpenAI spravidla rešpektuje robots.txt do 24 hodín. Obsah, ktorý už vstúpil do tréningu, to nevráti.

Skontrolovať, či to funguje

GPTBot dodržiava robots.txt — napriek tomu sa nedostane cez, ak WAF alebo ochrana pred botmi vopred odmietne user-agenta s chybou 403. citeglass načíta vašu stránku so skutočným user-agentom GPTBot a ukáže, či pravidlo robots.txt a skutočná odpoveď servera súhlasia.

Skontrolujte vlastný web

citeglass ukáže za asi 30 sekúnd, kde je váš web pre AI systémy nečitateľný — zdarma a bez prihlásenia.

Čítať ďalej

Všeobecná informácia, nie právne poradenstvo. GEO je mladý odbor — odporúčania sa môžu meniť.