Kezdőlap › Tudásbázis › seo.cat.crawler
GPTBot engedélyezése vagy blokkolása
A GPTBot az a bejáró, amellyel az OpenAI nyilvánosan elérhető tartalmakat gyűjt jövőbeli modellek betanításához.
Miért felel a GPTBot
A GPTBot oldalakat tölt be betanítási adatokhoz — nem egy konkrét felhasználói kérdés megválaszolásához a ChatGPT-ben. A ChatGPT élő kereséséért az OAI-SearchBot és a ChatGPT-User felel. Aki blokkolja a GPTBotot, de látható akar maradni az AI-keresésben, annak továbbra is engedélyeznie kell ezt a kettőt.
Engedélyezés
Egy saját blokk teljes hozzáférést ad a GPTBotnak: „User-agent: GPTBot” majd „Allow: /”. Fontos: egy botspecifikus blokk a GPTBot esetében teljesen felülírja a „User-agent: *” blokkot — a szükséges Disallow szabályokat ott ismételd meg.
Blokkolás
„User-agent: GPTBot” majd „Disallow: /” távol tartja a GPTBotot az egész domaintől. Az OpenAI általában 24 órán belül betartja a robots.txt-t. A betanításba már bekerült tartalmat ez nem hozza vissza.
Ellenőrizd, hogy működik-e
A GPTBot betartja a robots.txt-t — mégsem jut át, ha egy WAF vagy botvédelem előzőleg 403-mal elutasítja a user-agentet. A citeglass a valódi GPTBot user-agenttel hívja le az oldaladat, és megmutatja, hogy a robots.txt-szabály és a tényleges szerverválasz egyezik-e.
Ellenőrizd a saját webhelyedet
A citeglass körülbelül 30 másodperc alatt megmutatja, hol olvashatatlan a webhelyed az MI-rendszerek számára — ingyen és bejelentkezés nélkül.
Tovább olvasom
- OAI-SearchBot és ChatGPT-User
- MI-robotok vezérlése a robots.txt-ben
- Tanítás tiltása, keresés engedélyezése
Általános tájékoztatás, nem jogi tanácsadás. A GEO fiatal terület — az ajánlások változhatnak.