GPTBotin salliminen tai estäminen

GPTBot on indeksointirobotti, jolla OpenAI kerää julkisesti saatavilla olevaa sisältöä tulevien mallien koulutukseen.

Mistä GPTBot vastaa

GPTBot lataa sivuja koulutusdataa varten — ei vastatakseen konkreettiseen käyttäjän kysymykseen ChatGPT:ssä. ChatGPT:n live-hausta vastaavat OAI-SearchBot ja ChatGPT-User. Sen, joka estää GPTBotin mutta haluaa pysyä näkyvänä tekoälyhaussa, on edelleen sallittava nämä kaksi.

Salliminen

Oma lohko antaa GPTBotille täyden pääsyn: ”User-agent: GPTBot” ja sen jälkeen ”Allow: /”. Tärkeää: bottikohtainen lohko korvaa GPTBotin osalta ”User-agent: *” -lohkon kokonaan — toista tarvittavat Disallow-säännöt siellä.

Estäminen

”User-agent: GPTBot” ja sen jälkeen ”Disallow: /” pitää GPTBotin poissa koko verkkotunnuksesta. OpenAI noudattaa robots.txt-tiedostoa yleensä 24 tunnin kuluessa. Jo koulutukseen päätynyttä sisältöä tämä ei palauta.

Tarkista, toimiiko se

GPTBot noudattaa robots.txt-tiedostoa — mutta ei silti pääse läpi, jos WAF tai bottisuojaus torjuu user-agentin ennalta 403-virheellä. citeglass hakee sivusi aidolla GPTBot-user-agentilla ja näyttää, täsmäävätkö robots.txt-sääntö ja todellinen palvelinvastaus.

Tarkista oma sivustosi

citeglass näyttää noin 30 sekunnissa, missä sivustosi on tekoälyjärjestelmille lukukelvoton — ilmaiseksi ja ilman kirjautumista.

Lue lisää

Yleistä tietoa, ei oikeudellista neuvontaa. GEO on nuori ala — suositukset voivat muuttua.