Google-Extended 和 Googlebot
Google-Extended 不是獨立的爬蟲，而是一個 robots.txt 權杖，你用它控制內容用於 Gemini 訓練的使用。
兩個分開的槓桿
用於 Google 搜尋和 AI 總覽的擷取透過一般的 Googlebot 進行。Google-Extended 只決定你的內容是否可以額外用於訓練生成式 Google 模型。
只排除訓練
「User-agent: Google-Extended」後跟「Disallow: /」將你從 Gemini 訓練中移除，而不影響在 Google 搜尋或 AI 總覽中的可見性——Googlebot 仍被允許。
這不能實現什麼
Google-Extended 不能阻止你頁面的文字摘錄在 AI 總覽中被引用——那遵循一般的搜尋索引。不想出現在那裡的人，必須對 Googlebot 限制頁面，從而也失去傳統搜尋。
檢查狀態
citeglass 讀取你的 robots.txt，並逐個機器人——Googlebot 和 Google-Extended——顯示有效規則，包括它是透過萬用字元還是透過獨立的區塊生效的問題。
檢查你自己的網站
citeglass 約 30 秒內顯示你的網站在哪裡對 AI 系統不可讀 — 免費且無需登入。
繼續閱讀
一般資訊，不構成法律建議。GEO 是一個新興領域 — 建議可能會變化。