Avaleht › Teadmusbaas › Teemad

Keela treenimine, luba otsing

Enamik pakkujaid eraldab treeningroomaja otsinguroomajast. Nii saad mudelitreeningust välja astuda ja siiski tsiteeritud allikana ilmuda.

Blokeeri treeningbotid

Disallow: GPTBot (OpenAI), ClaudeBot (Anthropic), CCBot (Common Crawl), lisaks märgendid Google-Extended ja Applebot-Extended. Valikuliselt Meta-ExternalAgent, kui soovid ka Llama treeningust välja.

Luba otsingubotid

Allow: OAI-SearchBot ja ChatGPT-User (ChatGPT-otsing), Claude-SearchBot ja Claude-User (Claude), PerplexityBot ja Perplexity-User (Perplexity), Googlebot (Google otsing ja tehisintellekti ülevaated).

Hallid alad

Mitte iga pakkuja ei eralda puhtalt: Common Crawl ei tunne otsingut, Bytespider segab mõlemat. Ja tekstilõik võib sattuda tehisintellekti ülevaatesse ka siis, kui oled treenimise keelanud — see järgib otsinguindekseerimist.

Konfiguratsiooni kontroll

citeglass näitab iga boti kohta eraldi kehtivat robots.txt-i reeglit ja tegelikku serveri vastust — nii näed ühe pilguga, kas eraldus „treenimine väljas, otsing sees“ tegelikult toimib.

Kontrolli oma veebisaiti

citeglass näitab umbes 30 sekundiga, kus sinu veebisait on tehisintellekti süsteemidele loetamatu — tasuta ja ilma sisselogimiseta.

Loe edasi

• Kõikide tehisintellekti roomajate väljajätmine
• GPTBoti lubamine või blokeerimine
• Google-Extended ja Googlebot

Üldine teave, mitte õigusnõustamine. GEO on noor valdkond — soovitused võivad muutuda.