Pradžia › Žinių bazė › seo.cat.crawler

ClaudeBot ir Anthropic naršyklės

Anthropic Claude reikmėms valdo tris naršykles: vieną mokymui, vieną paieškai ir vieną gavimui pagal vartotojo užklausą.

Trys botai

ClaudeBot renka mokymo duomenis. Claude-SearchBot kuria indeksą žiniatinklio paieškai Claude. Claude-User gauna puslapį, kai vartotojas to paprašo pokalbyje. Tik ClaudeBot susijęs su modelio mokymu.

Reguliuoti prieigą

Kiekvienam botui atskiras robots.txt blokas. Kas atmeta mokymą, bet nori būti cituojamas Claude atsakymuose, blokuoja ClaudeBot su „Disallow: /“ ir toliau leidžia Claude-SearchBot ir Claude-User.

Dažna klaida

Vienas blokas „User-agent: Claude*“ neveikia — robots.txt nepažįsta pakaitos simbolių vartotojo agento pavadinime, išskyrus atskirą „*“. Įvardykite kiekvieną botą atskirai.

Serverio atsakymo tikrinimas

citeglass gauna jūsų puslapį su tikrais ClaudeBot, Claude-SearchBot ir Claude-User vartotojo agentais ir pažymi, kai robots.txt botą leidžia, bet serveris jį atmeta.

Patikrinkite savo svetainę

citeglass per maždaug 30 sekundžių parodo, kur jūsų svetainė neįskaitoma DI sistemoms — nemokamai ir be prisijungimo.

Skaitykite toliau

• GPTBot leidimas arba blokavimas
• PerplexityBot ir Perplexity-User
• DI robotų valdymas robots.txt

Bendra informacija, ne teisinė konsultacija. GEO yra jauna sritis — rekomendacijos gali keistis.