Start › Kunskapsbank › Ämnen

Förbjud träning, tillåt sökning

De flesta leverantörer skiljer tränings-crawlaren från sök-crawlaren. Därmed kan du stiga av modellträningen och ändå framträda som citerad källa.

Blockera tränings-botar

Disallow för: GPTBot (OpenAI), ClaudeBot (Anthropic), CCBot (Common Crawl), plus token Google-Extended och Applebot-Extended. Valfritt Meta-ExternalAgent om du också vill ut ur Llama-träningen.

Tillåt sök-botar

Allow för: OAI-SearchBot och ChatGPT-User (ChatGPT-sökning), Claude-SearchBot och Claude-User (Claude), PerplexityBot och Perplexity-User (Perplexity), Googlebot (Google-sökning och AI-översikter).

Gråzoner

Alla leverantörer skiljer inte rent: Common Crawl känner inte till sökning, Bytespider blandar båda. Och ett textutdrag kan hamna i en AI-översikt även om du förbjudit träning — det följer sökindexeringen.

Kontrollera konfigurationen

citeglass visar per bot separat den gällande robots.txt-regeln och det riktiga serversvaret — så ser du med en blick om uppdelningen ”träning av, sökning på” faktiskt fungerar.

Kontrollera din egen webbplats

citeglass visar på cirka 30 sekunder var din webbplats är oläsbar för AI-system — gratis och utan inloggning.

Läs vidare

• Stäng ute alla AI-crawlare
• Tillåta eller blockera GPTBot
• Google-Extended och Googlebot

Allmän information, inte juridisk rådgivning. GEO är ett ungt område — rekommendationer kan ändras.