Forside › Vidensbase › Emner

Forbyd træning, tillad søgning

De fleste udbydere adskiller trænings-crawleren fra søge-crawleren. Dermed kan du stå af modeltræningen og alligevel optræde som citeret kilde.

Blokér trænings-bots

Disallow for: GPTBot (OpenAI), ClaudeBot (Anthropic), CCBot (Common Crawl), plus token'erne Google-Extended og Applebot-Extended. Valgfrit Meta-ExternalAgent, hvis du også vil ud af Llama-træningen.

Tillad søge-bots

Allow for: OAI-SearchBot og ChatGPT-User (ChatGPT-søgning), Claude-SearchBot og Claude-User (Claude), PerplexityBot og Perplexity-User (Perplexity), Googlebot (Google-søgning og AI-overblik).

Gråzoner

Ikke alle udbydere adskiller rent: Common Crawl kender ikke søgning, Bytespider blander begge. Og et tekstuddrag kan havne i et AI-overblik, selvom du har forbudt træning — det følger søgeindekseringen.

Tjek konfigurationen

citeglass viser pr. bot adskilt den gældende robots.txt-regel og det rigtige serversvar — så ser du med ét blik, om adskillelsen „træning fra, søgning til“ rent faktisk virker.

Tjek dit eget site

citeglass viser på cirka 30 sekunder, hvor dit website er ulæsbart for AI-systemer — gratis og uden login.

Læs videre

• Udeluk alle AI-crawlere
• Tillad eller blokér GPTBot
• Google-Extended og Googlebot

Generel information, ikke juridisk rådgivning. GEO er et ungt felt — anbefalinger kan ændre sig.