GPTBot leidimas arba blokavimas

GPTBot yra naršyklė, kuria OpenAI renka viešai prieinamą turinį būsimų modelių mokymui.

Už ką atsakingas GPTBot

GPTBot įkelia puslapius mokymo duomenims — ne tam, kad atsakytų į konkretų vartotojo klausimą ChatGPT. Už tiesioginę paiešką ChatGPT atsako OAI-SearchBot ir ChatGPT-User. Kas blokuoja GPTBot, bet nori likti matomas DI paieškoje, turi ir toliau leisti šiuos du.

Leidimas

Atskiras blokas suteikia GPTBot visišką prieigą: „User-agent: GPTBot“, po kurio „Allow: /“. Svarbu: botui specifinis blokas GPTBot atveju visiškai pakeičia bloką „User-agent: *“ — pakartokite ten reikiamas Disallow taisykles.

Blokavimas

„User-agent: GPTBot“, po kurio „Disallow: /“, laiko GPTBot atokiau nuo viso domeno. OpenAI paprastai laikosi robots.txt per 24 valandas. Turinio, kuris jau pateko į mokymą, tai negrąžina.

Patikrinkite, ar veikia

GPTBot laikosi robots.txt — vis dėlto nepraeina, jei WAF ar apsauga nuo botų iš anksto atmeta vartotojo agentą su 403. citeglass gauna jūsų puslapį su tikru GPTBot vartotojo agentu ir parodo, ar robots.txt taisyklė ir faktinis serverio atsakymas sutampa.

Patikrinkite savo svetainę

citeglass per maždaug 30 sekundžių parodo, kur jūsų svetainė neįskaitoma DI sistemoms — nemokamai ir be prisijungimo.

Skaitykite toliau

Bendra informacija, ne teisinė konsultacija. GEO yra jauna sritis — rekomendacijos gali keistis.