Start › Kennisbank › AI-crawlers in detail

Google-Extended en Googlebot

Google-Extended is geen aparte crawler maar een robots.txt-token waarmee je bepaalt of je inhoud voor Gemini-training wordt gebruikt.

Twee gescheiden knoppen

Het ophalen voor Google Zoeken en AI-overzichten verloopt via de gewone Googlebot. Google-Extended bepaalt alleen of je inhoud daarnaast mag worden gebruikt om generatieve Google-modellen te trainen.

Alleen training uitsluiten

'User-agent: Google-Extended' gevolgd door 'Disallow: /' haalt je uit de Gemini-training zonder de zichtbaarheid in Google Zoeken of AI-overzichten te raken — Googlebot blijft toegestaan.

Wat dit niet doet

Google-Extended voorkomt niet dat een fragment van je pagina in een AI-overzicht wordt geciteerd — dat volgt de normale zoekindexering. Om daar niet te verschijnen, zou je de pagina voor Googlebot moeten beperken en ook het klassieke zoeken verliezen.

De status controleren

citeglass leest je robots.txt en toont de geldende regel per bot — Googlebot en Google-Extended — inclusief of die via een jokerteken of een eigen blok geldt.

Controleer je eigen site

citeglass laat in ongeveer 30 seconden zien waar je website onleesbaar is voor AI-systemen — gratis en zonder account.

Verder lezen

• Google AI-overzichten
• GPTBot toestaan of blokkeren
• Training verbieden, zoeken toestaan

Algemene informatie, geen juridisch advies. GEO is een jong vakgebied — aanbevelingen kunnen veranderen.