Kezdőlap › Tudásbázis › Témák

Tanítás tiltása, keresés engedélyezése

A legtöbb szolgáltató elkülöníti a tanító bejárót a kereső bejárótól. Így kiszállhatsz a modelltanításból, és mégis megjelenhetsz idézett forrásként.

Tanító botok blokkolása

Disallow ezekre: GPTBot (OpenAI), ClaudeBot (Anthropic), CCBot (Common Crawl), plusz a Google-Extended és Applebot-Extended tokenek. Opcionálisan Meta-ExternalAgent, ha a Llama tanításából is ki akarsz szállni.

Kereső botok engedélyezése

Allow ezekre: OAI-SearchBot és ChatGPT-User (ChatGPT-keresés), Claude-SearchBot és Claude-User (Claude), PerplexityBot és Perplexity-User (Perplexity), Googlebot (Google-keresés és MI-áttekintések).

Szürke zónák

Nem minden szolgáltató választ el tisztán: a Common Crawl nem ismer keresést, a Bytespider keveri a kettőt. És egy szövegrészlet bekerülhet egy MI-áttekintésbe akkor is, ha tiltottad a tanítást — ez a keresési indexelést követi.

A konfiguráció ellenőrzése

A citeglass botonként külön megmutatja az érvényes robots.txt-szabályt és a valódi szerverválaszt — így egy pillantással látod, hogy a „tanítás ki, keresés be” szétválasztás valóban működik-e.

Ellenőrizd a saját webhelyedet

A citeglass körülbelül 30 másodperc alatt megmutatja, hol olvashatatlan a webhelyed az MI-rendszerek számára — ingyen és bejelentkezés nélkül.

Tovább olvasom

• Az összes MI-bejáró kizárása
• GPTBot engedélyezése vagy blokkolása
• Google-Extended és Googlebot

Általános tájékoztatás, nem jogi tanácsadás. A GEO fiatal terület — az ajánlások változhatnak.