Start › Kennisbank › AI-crawlers in detail
Amazonbot
Amazonbot verzamelt inhoud voor de assistentdiensten van Amazon, waaronder Alexa-antwoorden en de winkelassistent Rufus.
Waarvoor de data worden gebruikt
Amazon gebruikt de gecrawlde inhoud voor vraag-en-antwoordfuncties en productcontext. Voor webshops en productpagina's kan zichtbaarheid hier relevant zijn; voor pure contentsites minder.
Toegang regelen
'User-agent: Amazonbot' met 'Allow: /' of 'Disallow: /'. Amazonbot respecteert robots.txt en identificeert zich met een verifieerbare user agent en IP-bereiken.
Rate limiten in plaats van blokkeren
Wie Amazonbot in principe wil toestaan maar de belasting wil verlagen, kan de frequentie beperken via 'Crawl-delay' of serverconfiguratie.
Controleren
citeglass toont de geldende robots.txt-regel voor Amazonbot en test of de server hem inhoud levert.
Controleer je eigen site
citeglass laat in ongeveer 30 seconden zien waar je website onleesbaar is voor AI-systemen — gratis en zonder account.
Verder lezen
Algemene informatie, geen juridisch advies. GEO is een jong vakgebied — aanbevelingen kunnen veranderen.