الرئيسية › قاعدة المعرفة › seo.cat.crawler
Google-Extended و Googlebot
Google-Extended ليس زاحفاً خاصاً بل رمز robots.txt تتحكم به في استخدام محتواك لتدريب Gemini.
رافعتان منفصلتان
يجري الجلب لبحث Google ونظراته العامة عبر Googlebot العادي. يقرر Google-Extended فقط ما إذا كان يجوز استخدام محتواك إضافةً لتدريب نماذج Google التوليدية.
استبعاد التدريب فقط
«User-agent: Google-Extended» يتبعها «Disallow: /» تُخرجك من تدريب Gemini دون المساس بالظهور في بحث Google أو نظراته العامة — يبقى Googlebot مسموحاً.
ما لا يحققه ذلك
لا يمنع Google-Extended اقتباس مقتطف نصي من صفحتك في نظرة عامة للذكاء الاصطناعي — فذلك يتبع فهرسة البحث العادية. من لا يريد الظهور هناك عليه تقييد الصفحة لـ Googlebot ويفقد بذلك البحث الكلاسيكي أيضاً.
التحقق من الحالة
يقرأ citeglass ملف robots.txt الخاص بك ويعرض لكل بوت — Googlebot و Google-Extended — القاعدة السارية، بما في ذلك مسألة ما إذا كانت تسري عبر حرف بدل أو كتلة خاصة.
افحص موقعك أنت
يوضح citeglass في نحو 30 ثانية أين يكون موقعك غير قابل للقراءة لأنظمة الذكاء الاصطناعي — مجانًا ودون تسجيل دخول.
تابع القراءة
معلومات عامة، وليست استشارة قانونية. GEO مجال حديث — قد تتغير التوصيات.