Il-bidu › Bażi ta' għarfien › Suġġetti

Ipprojbixxi t-taħriġ, ippermetti t-tfittxija

Il-biċċa l-kbira tal-fornituri jisseparaw il-crawler tat-taħriġ mill-crawler tat-tfittxija. B'hekk tista' toħroġ mit-taħriġ tal-mudelli u xorta tidher bħala sors ikkwotat.

Imblokka l-bots tat-taħriġ

Disallow għal: GPTBot (OpenAI), ClaudeBot (Anthropic), CCBot (Common Crawl), flimkien mat-tokens Google-Extended u Applebot-Extended. Fakultattiv Meta-ExternalAgent jekk trid toħroġ ukoll mit-taħriġ ta' Llama.

Ippermetti l-bots tat-tfittxija

Allow għal: OAI-SearchBot u ChatGPT-User (tfittxija ChatGPT), Claude-SearchBot u Claude-User (Claude), PerplexityBot u Perplexity-User (Perplexity), Googlebot (tfittxija Google u ħarsiet ġenerali tal-IA).

Żoni griżi

Mhux kull fornitur jissepara b'mod nadif: Common Crawl ma jafx tfittxija, Bytespider iħallat it-tnejn. U silta ta' test tista' tispiċċa f'ħarsa ġenerali tal-IA anke jekk ipprojbixxejt it-taħriġ — dan isegwi l-indiċjar tat-tfittxija.

Iċċekkja l-konfigurazzjoni

citeglass juri għal kull bot separatament ir-regola robots.txt fis-seħħ u r-rispons veru tas-server — b'hekk tara b'daqqa t'għajn jekk is-separazzjoni "taħriġ mitfi, tfittxija mixgħula" tapplikax tabilħaqq.

Iċċekkja s-sit tiegħek stess

citeglass juri f'madwar 30 sekonda fejn is-sit tiegħek mhux leġġibbli għas-sistemi tal-IA — b'xejn u mingħajr login.

Kompli aqra

• Timblokka l-crawlers tal-IA kollha
• Tippermetti jew timblokka GPTBot
• Google-Extended u Googlebot

Informazzjoni ġenerali, mhux parir legali. GEO huwa qasam żagħżugħ — ir-rakkomandazzjonijiet jistgħu jinbidlu.