Úvod › Znalostní báze › seo.cat.crawler
Amazonbot
Amazonbot sbírá obsah pro asistenční služby Amazonu, mezi nimi odpovědi Alexy a nákupního asistenta Rufus.
K čemu se data používají
Amazon využívá procházený obsah pro funkce otázka-odpověď a produktový kontext. Pro obchody a produktové stránky může být viditelnost důležitá, pro čistě obsahové stránky méně.
Nastavení přístupu
„User-agent: Amazonbot“ s „Allow: /“ nebo „Disallow: /“. Amazonbot dodržuje robots.txt a identifikuje se ověřitelným user-agentem s rozsahy IP.
Omezit frekvenci místo blokování
Kdo chce Amazonbot zásadně povolit, ale snížit zátěž, může frekvenci zpomalit přes „Crawl-delay“ nebo konfiguraci serveru.
Kontrola
citeglass zobrazuje platné pravidlo robots.txt pro Amazonbot a testuje, zda mu server doručuje obsah.
Zkontrolujte vlastní web
citeglass ukáže během asi 30 sekund, kde je váš web pro AI systémy nečitelný — zdarma a bez přihlášení.
Číst dál
Obecná informace, nikoli právní poradenství. GEO je mladý obor — doporučení se mohou měnit.