Start › Wissen › KI-Crawler im Detail

Amazonbot

Amazonbot sammelt Inhalte für Amazons Assistenzdienste, darunter Alexa-Antworten und den Einkaufsassistenten Rufus.

Wofür die Daten genutzt werden

Amazon setzt die gecrawlten Inhalte für Frage-Antwort-Funktionen und Produktkontext ein. Für Shops und Produktseiten kann Sichtbarkeit hier relevant sein, für reine Content-Seiten weniger.

Zugriff regeln

„User-agent: Amazonbot“ mit „Allow: /“ oder „Disallow: /“. Amazonbot hält sich an die robots.txt und identifiziert sich über einen verifizierbaren User-Agent mit IP-Bereichen.

Rate begrenzen statt sperren

Wer Amazonbot grundsätzlich zulassen, aber die Last senken will, kann über „Crawl-delay“ oder Server-Konfiguration die Frequenz drosseln.

Prüfen

citeglass zeigt die geltende robots.txt-Regel für Amazonbot und testet, ob der Server ihm Inhalt ausliefert.

Prüf deine eigene Seite

citeglass zeigt in rund 30 Sekunden, wo deine Website für KI-Systeme unlesbar ist — kostenlos und ohne Login.

Weiterlesen

• Applebot-Extended
• KI-Crawler in der robots.txt steuern
• Alle KI-Crawler aussperren

Allgemeine Information, keine Rechtsberatung. GEO ist ein junges Feld — Empfehlungen können sich ändern.