Acasă › Bază de cunoștințe › seo.cat.crawler

Google-Extended și Googlebot

Google-Extended nu este un crawler propriu, ci un token robots.txt cu care controlați utilizarea conținutului dvs. pentru antrenarea Gemini.

Două pârghii separate

Încărcarea pentru căutarea Google și rezumatele AI se face prin Googlebot-ul normal. Google-Extended decide doar dacă conținutul dvs. mai poate fi folosit și pentru antrenarea modelelor generative Google.

Excludeți doar antrenarea

„User-agent: Google-Extended” urmat de „Disallow: /” vă scoate din antrenarea Gemini fără a atinge vizibilitatea în căutarea Google sau în rezumatele AI — Googlebot rămâne permis.

Ce nu obține acest lucru

Google-Extended nu împiedică citarea unui fragment de text al paginii dvs. într-un rezumat AI — aceasta urmează indexarea normală de căutare. Cine nu vrea să apară acolo trebuie să restricționeze pagina pentru Googlebot și pierde astfel și căutarea clasică.

Verificați starea

citeglass citește robots.txt-ul dvs. și afișează per bot — Googlebot și Google-Extended — regula în vigoare, inclusiv întrebarea dacă se aplică printr-un metacaracter sau un bloc propriu.

Verifică-ți propriul site

citeglass arată în circa 30 de secunde unde site-ul tău este ilizibil pentru sistemele AI — gratuit și fără cont.

Citește mai departe

Informație generală, nu consultanță juridică. GEO este un domeniu tânăr — recomandările se pot schimba.