Etusivu › Tietopankki › Aiheet

Kiellä koulutus, salli haku

Useimmat tarjoajat erottavat koulutusrobotin hakurobotista. Näin voit jäädä pois mallikoulutuksesta ja silti näkyä siteerattuna lähteenä.

Estä koulutusbotit

Disallow: GPTBot (OpenAI), ClaudeBot (Anthropic), CCBot (Common Crawl), plus tunnisteet Google-Extended ja Applebot-Extended. Valinnaisesti Meta-ExternalAgent, jos haluat pois myös Llaman koulutuksesta.

Salli hakubotit

Allow: OAI-SearchBot ja ChatGPT-User (ChatGPT-haku), Claude-SearchBot ja Claude-User (Claude), PerplexityBot ja Perplexity-User (Perplexity), Googlebot (Google-haku ja tekoälykatsaukset).

Harmaat alueet

Jokainen tarjoaja ei erottele siististi: Common Crawl ei tunne hakua, Bytespider sekoittaa molemmat. Ja tekstiote voi päätyä tekoälykatsaukseen, vaikka olisit kieltänyt koulutuksen — se seuraa hakuindeksointia.

Konfiguraation tarkistus

citeglass näyttää botti­kohtaisesti erikseen voimassa olevan robots.txt-säännön ja todellisen palvelinvastauksen — näet yhdellä silmäyksellä, toimiiko erottelu ”koulutus pois, haku päällä” tosiasiassa.

Tarkista oma sivustosi

citeglass näyttää noin 30 sekunnissa, missä sivustosi on tekoälyjärjestelmille lukukelvoton — ilmaiseksi ja ilman kirjautumista.

Lue lisää

• Kaikkien tekoälyrobottien sulkeminen pois
• GPTBotin salliminen tai estäminen
• Google-Extended ja Googlebot

Yleistä tietoa, ei oikeudellista neuvontaa. GEO on nuori ala — suositukset voivat muuttua.