Start › Wissen › KI-Crawler im Detail

PerplexityBot und Perplexity-User

Perplexity zeigt zu jeder Antwort mehrere Quellen mit Titel und Domain. Ohne Zugriff für seine Bots tauchst du dort nicht auf.

PerplexityBot und Perplexity-User

PerplexityBot baut den Suchindex auf. Perplexity-User ruft eine Seite live ab, wenn eine Nutzerfrage sie erfordert. Beide brauchen Lesezugriff, damit deine Domain als Quelle erscheinen kann.

Erlauben

Je ein Block „User-agent: PerplexityBot“ und „User-agent: Perplexity-User“ mit „Allow: /“. Der Inhalt muss außerdem ohne JavaScript im HTML stehen — Perplexity rendert nur eingeschränkt.

Diskussion um die Einhaltung

Perplexity stand in der Kritik, robots.txt-Regeln zu umgehen. Eine robots.txt-Sperre ist trotzdem die richtige erste Maßnahme; wer den Zugriff hart unterbinden will, ergänzt eine Server- oder WAF-Regel auf den User-Agent.

Sichtbarkeit testen

citeglass prüft, ob PerplexityBot und Perplexity-User deine Seite laut robots.txt laden dürfen und ob dein Server ihnen tatsächlich Inhalt liefert.

Prüf deine eigene Seite

citeglass zeigt in rund 30 Sekunden, wo deine Website für KI-Systeme unlesbar ist — kostenlos und ohne Login.

Weiterlesen

• ClaudeBot und die Anthropic-Crawler
• Sichtbarkeit in Perplexity
• KI-Crawler in der robots.txt steuern

Allgemeine Information, keine Rechtsberatung. GEO ist ein junges Feld — Empfehlungen können sich ändern.