منع التدريب والسماح بالبحث

يفصل معظم المزوّدين زاحف التدريب عن زاحف البحث. بذلك يمكنك الخروج من تدريب النماذج والظهور مع ذلك كمصدر مقتبس.

حظر بوتات التدريب

Disallow لـ: GPTBot (OpenAI) وClaudeBot (Anthropic) وCCBot (Common Crawl)، بالإضافة إلى الرمزين Google-Extended وApplebot-Extended. اختيارياً Meta-ExternalAgent إذا أردت الخروج أيضاً من تدريب Llama.

السماح لبوتات البحث

Allow لـ: OAI-SearchBot وChatGPT-User (بحث ChatGPT)، وClaude-SearchBot وClaude-User (Claude)، وPerplexityBot وPerplexity-User (Perplexity)، وGooglebot (بحث Google ونظرات الذكاء الاصطناعي العامة).

المناطق الرمادية

لا يفصل كل مزوّد بوضوح: Common Crawl لا يعرف بحثاً، وBytespider يمزج الاثنين. وقد ينتهي مقتطف نصي في نظرة عامة للذكاء الاصطناعي حتى لو منعت التدريب — فذلك يتبع فهرسة البحث.

التحقق من التهيئة

يُظهر citeglass لكل بوت على حدة قاعدة robots.txt السارية واستجابة الخادم الحقيقية — فترى بنظرة واحدة ما إذا كان الفصل «التدريب معطّل، البحث مفعّل» ساري المفعول فعلاً.

افحص موقعك أنت

يوضح citeglass في نحو 30 ثانية أين يكون موقعك غير قابل للقراءة لأنظمة الذكاء الاصطناعي — مجانًا ودون تسجيل دخول.

تابع القراءة

معلومات عامة، وليست استشارة قانونية. GEO مجال حديث — قد تتغير التوصيات.