Ana sayfa › Bilgi tabanı › Konular

Eğitimi yasakla, aramaya izin ver

Çoğu sağlayıcı eğitim tarayıcısını arama tarayıcısından ayırır. Böylece model eğitiminden çıkabilir ve yine de alıntılanan kaynak olarak görünebilirsin.

Eğitim botlarını engelle

Disallow: GPTBot (OpenAI), ClaudeBot (Anthropic), CCBot (Common Crawl), ayrıca Google-Extended ve Applebot-Extended belirteçleri. Llama eğitiminden de çıkmak istiyorsan isteğe bağlı Meta-ExternalAgent.

Arama botlarına izin ver

Allow: OAI-SearchBot ve ChatGPT-User (ChatGPT araması), Claude-SearchBot ve Claude-User (Claude), PerplexityBot ve Perplexity-User (Perplexity), Googlebot (Google araması ve yapay zeka genel bakışları).

Gri alanlar

Her sağlayıcı temiz ayırmaz: Common Crawl aramayı bilmez, Bytespider ikisini karıştırır. Ve eğitimi yasaklamış olsan bile bir metin parçası bir yapay zeka genel bakışında yer alabilir — bu, arama dizinlemesini izler.

Yapılandırmayı kontrol et

citeglass her bot için ayrı olarak geçerli robots.txt kuralını ve gerçek sunucu yanıtını gösterir — böylece "eğitim kapalı, arama açık" ayrımının gerçekten işleyip işlemediğini bir bakışta görürsün.

Kendi sitenizi kontrol edin

citeglass, yaklaşık 30 saniyede sitenizin YZ sistemleri için nerede okunamaz olduğunu gösterir — ücretsiz ve oturum açmadan.

Devamını oku

Genel bilgi, hukuki danışmanlık değil. GEO genç bir alandır — öneriler değişebilir.