Il-bidu › Bażi ta' għarfien › seo.cat.crawler

Tippermetti jew timblokka GPTBot

GPTBot huwa l-crawler li bih OpenAI tiġbor kontenut disponibbli għall-pubbliku għat-taħriġ ta' mudelli futuri.

Għal xiex huwa responsabbli GPTBot

GPTBot itella' paġni għal data ta' taħriġ — mhux biex iwieġeb mistoqsija konkreta ta' utent f'ChatGPT. Għat-tfittxija live f'ChatGPT huma responsabbli OAI-SearchBot u ChatGPT-User. Min jimblokka GPTBot iżda jrid jibqa' viżibbli fit-tfittxija tal-AI, irid ikompli jippermetti dawn it-tnejn.

Tippermetti

Blokk separat jagħti lil GPTBot aċċess sħiħ: "User-agent: GPTBot" segwit minn "Allow: /". Importanti: blokk speċifiku għal bot jissostitwixxi għal GPTBot il-blokk "User-agent: *" kompletament — irrepeti hemm ir-regoli Disallow meħtieġa.

Timblokka

"User-agent: GPTBot" segwit minn "Disallow: /" iżomm lil GPTBot 'il bogħod mid-dominju kollu. OpenAI ġeneralment tirrispetta robots.txt fi żmien 24 siegħa. Kontenut li diġà daħal fit-taħriġ dan ma jġibux lura.

Iċċekkja jekk jaħdimx

GPTBot jirrispetta robots.txt — imma xorta ma jgħaddix jekk WAF jew protezzjoni mill-bots tirrifjuta l-user-agent minn qabel b'403. citeglass iġib il-paġna tiegħek bl-user-agent veru ta' GPTBot u juri jekk ir-regola robots.txt u r-rispons attwali tas-server jaqblux.

Iċċekkja s-sit tiegħek stess

citeglass juri f'madwar 30 sekonda fejn is-sit tiegħek mhux leġġibbli għas-sistemi tal-IA — b'xejn u mingħajr login.

Kompli aqra

Informazzjoni ġenerali, mhux parir legali. GEO huwa qasam żagħżugħ — ir-rakkomandazzjonijiet jistgħu jinbidlu.