דף הבית › מאגר ידע › seo.cat.crawler
Google-Extended ו-Googlebot
Google-Extended אינו סורק נפרד אלא אסימון robots.txt שבו אתם שולטים בשימוש בתוכן שלכם לאימון Gemini.
שני מנופים נפרדים
האחזור לחיפוש Google ולסקירות ה-AI עובר דרך Googlebot הרגיל. Google-Extended מחליט רק אם מותר להשתמש בתוכן שלכם בנוסף לאימון מודלים גנרטיביים של Google.
להחריג רק אימון
"User-agent: Google-Extended" ואחריו "Disallow: /" מוציא אתכם מאימון Gemini בלי לפגוע בנראות בחיפוש Google או בסקירות ה-AI — Googlebot נשאר מותר.
מה זה לא משיג
Google-Extended אינו מונע ציטוט של קטע טקסט מהדף שלכם בסקירת AI — זה עוקב אחר אינדקוס החיפוש הרגיל. מי שלא רוצה להופיע שם חייב להגביל את הדף עבור Googlebot ובכך מאבד גם את החיפוש הקלאסי.
בדיקת מצב
citeglass קורא את ה-robots.txt שלכם ומציג לכל בוט — Googlebot ו-Google-Extended — את הכלל התקף, כולל השאלה אם הוא חל דרך תו כללי או בלוק נפרד.
בדוק את האתר שלך
citeglass מראה תוך כ-30 שניות היכן האתר שלך אינו קריא למערכות בינה מלאכותית — בחינם וללא התחברות.
המשך לקרוא
מידע כללי, לא ייעוץ משפטי. GEO הוא תחום צעיר — המלצות עשויות להשתנות.