GPTBot を許可またはブロックする

GPTBot は、OpenAI が将来のモデルの学習のために公開コンテンツを収集するのに使うクローラーです。

GPTBot が担当すること

GPTBot は学習データ用にページを読み込みます — ChatGPT での具体的なユーザーの質問への回答のためではありません。ChatGPT のライブ検索は OAI-SearchBot と ChatGPT-User が担当します。GPTBot をブロックしても AI 検索で見えていたい場合は、この2つを引き続き許可する必要があります。

許可する

専用ブロックが GPTBot にフルアクセスを与えます：「User-agent: GPTBot」に続けて「Allow: /」。重要：ボット固有のブロックは GPTBot に対して「User-agent: *」ブロックを完全に置き換えます — 必要な Disallow ルールをそこで繰り返してください。

ブロックする

「User-agent: GPTBot」に続けて「Disallow: /」で GPTBot をドメイン全体から遠ざけます。OpenAI は通常 24 時間以内に robots.txt を尊重します。すでに学習に入ったコンテンツはこれでは取り戻せません。

効いているか確認する

GPTBot は robots.txt を守ります — しかし WAF やボット保護がユーザーエージェントを事前に 403 で拒否すると、それでも通りません。citeglass は本物の GPTBot ユーザーエージェントでページを取得し、robots.txt ルールと実際のサーバー応答が一致するかを示します。

自分のサイトをチェック

citeglass は約 30 秒で、あなたのサイトが AI システムにとってどこが読み取れないかを示します — 無料、ログイン不要。

続きを読む

一般的な情報であり、法的助言ではありません。GEO は新しい分野です — 推奨事項は変わる可能性があります。