Beranda › Basis pengetahuan › seo.cat.crawler
Google-Extended dan Googlebot
Google-Extended bukan perayap tersendiri, melainkan token robots.txt yang Anda gunakan untuk mengontrol penggunaan konten Anda untuk pelatihan Gemini.
Dua tuas terpisah
Pengambilan untuk pencarian Google dan ikhtisar AI berjalan melalui Googlebot biasa. Google-Extended hanya memutuskan apakah konten Anda boleh digunakan juga untuk pelatihan model Google generatif.
Hanya mengecualikan pelatihan
"User-agent: Google-Extended" diikuti "Disallow: /" mengeluarkan Anda dari pelatihan Gemini tanpa memengaruhi visibilitas di pencarian Google atau ikhtisar AI — Googlebot tetap diizinkan.
Apa yang tidak dicapai ini
Google-Extended tidak mencegah kutipan teks dari halaman Anda dikutip dalam ikhtisar AI — itu mengikuti pengindeksan pencarian biasa. Yang tidak ingin muncul di sana harus membatasi halaman untuk Googlebot dan dengan demikian juga kehilangan pencarian klasik.
Memeriksa status
citeglass membaca robots.txt Anda dan menampilkan per bot — Googlebot dan Google-Extended — aturan yang berlaku, termasuk pertanyaan apakah itu berlaku melalui wildcard atau blok tersendiri.
Periksa situs Anda sendiri
citeglass menunjukkan dalam sekitar 30 detik di mana situs Anda tidak terbaca oleh sistem AI — gratis dan tanpa login.
Baca lebih lanjut
Informasi umum, bukan nasihat hukum. GEO adalah bidang yang masih muda — rekomendasi bisa berubah.