Úvod › Znalostní báze › Témata

Zakázat trénování, povolit vyhledávání

Většina poskytovatelů odděluje trénovací crawler od vyhledávacího. Můžeš tak vystoupit z trénování modelů a přesto se objevovat jako citovaný zdroj.

Blokovat trénovací boty

Disallow pro: GPTBot (OpenAI), ClaudeBot (Anthropic), CCBot (Common Crawl), plus tokeny Google-Extended a Applebot-Extended. Volitelně Meta-ExternalAgent, pokud chceš i ven z trénování Llamy.

Povolit vyhledávací boty

Allow pro: OAI-SearchBot a ChatGPT-User (vyhledávání v ChatGPT), Claude-SearchBot a Claude-User (Claude), PerplexityBot a Perplexity-User (Perplexity), Googlebot (vyhledávání Google a AI přehledy).

Šedé zóny

Ne každý poskytovatel odděluje čistě: Common Crawl vyhledávání nezná, Bytespider obojí míchá. A textový úryvek může skončit v AI přehledu, i když jsi trénování zakázal — to sleduje indexaci pro vyhledávání.

Kontrola konfigurace

citeglass ukazuje pro každého bota zvlášť platné pravidlo robots.txt a skutečnou odpověď serveru — na jeden pohled tak vidíš, zda oddělení „trénování vypnuto, vyhledávání zapnuto“ skutečně funguje.

Zkontrolujte vlastní web

citeglass ukáže během asi 30 sekund, kde je váš web pro AI systémy nečitelný — zdarma a bez přihlášení.

Číst dál

• Vyloučit všechny AI crawlery
• Povolit nebo blokovat GPTBot
• Google-Extended a Googlebot

Obecná informace, nikoli právní poradenství. GEO je mladý obor — doporučení se mohou měnit.