GPTBoti lubamine või blokeerimine

GPTBot on roomik, millega OpenAI kogub avalikult kättesaadavat sisu tulevaste mudelite treenimiseks.

Mille eest GPTBot vastutab

GPTBot laadib lehti treeningandmete jaoks — mitte konkreetsele kasutaja küsimusele vastamiseks ChatGPT-s. ChatGPT reaalajaotsingu eest vastutavad OAI-SearchBot ja ChatGPT-User. Kes blokeerib GPTBoti, kuid tahab jääda AI-otsingus nähtavaks, peab neid kahte edasi lubama.

Lubamine

Oma plokk annab GPTBotile täieliku juurdepääsu: „User-agent: GPTBot“, millele järgneb „Allow: /“. Tähtis: botispetsiifiline plokk asendab GPTBoti puhul ploki „User-agent: *“ täielikult — korrake seal vajalikke Disallow-reegleid.

Blokeerimine

„User-agent: GPTBot“, millele järgneb „Disallow: /“, hoiab GPTBoti eemal kogu domeenist. OpenAI järgib robots.txt-i reeglina 24 tunni jooksul. Sisu, mis on juba treeningusse jõudnud, see tagasi ei too.

Kontrollige, kas see toimib

GPTBot järgib robots.txt-i — kuid siiski ei pääse läbi, kui WAF või botikaitse lükkab user-agenti eelnevalt tagasi veaga 403. citeglass pärib teie lehe päris GPTBoti user-agentiga ja näitab, kas robots.txt-reegel ja tegelik serveri vastus kattuvad.

Kontrolli oma veebisaiti

citeglass näitab umbes 30 sekundiga, kus sinu veebisait on tehisintellekti süsteemidele loetamatu — tasuta ja ilma sisselogimiseta.

Loe edasi

Üldine teave, mitte õigusnõustamine. GEO on noor valdkond — soovitused võivad muutuda.