KI-Crawler / KI-Crawler

Amazonbot: Aufgabe und Wirkung einer Sperre

Von der CitedBy-Redaktion · Geprüft am 2026-10-21 · 2 Quellen · Methode (EN)

Was Amazonbot ist

Amazons Seite behandelt drei User-Agents: Amazonbot, Amzn-SearchBot und Amzn-User. Laut Amazon gilt jede Einstellung unabhängig von den anderen und kann etwa 24 Stunden brauchen, bis sie wirkt. Nur beim ersten heißt es, dass er möglicherweise KI-Modelle von Amazon trainiert.

Was der Betreiber sagt

Die Worte des Betreibers (englisches Original): “Amazonbot is used to improve our products and services. This helps us provide more accurate information to customers and may be used to train Amazon AI models.”

Quelle: Amazon: About Amazonbot, gelesen am 21. Oktober 2026.

Was passiert, wenn Sie Amazonbot sperren

Amzn-SearchBot ist für Suchfunktionen wie Alexa gedacht: Wenn Sie ihn zulassen, kommen Ihre Inhalte dort für die Anzeige infrage. Amzn-User beantwortet Live-Anfragen an Alexa, die aktuelle Informationen brauchen. Laut Amazon befolgt er möglicherweise nicht alle robots.txt-Anweisungen und crawlt nicht für das Training generativer KI. Eine robots.txt, die nur Amazonbot nennt, beschreibt deshalb Ihre Regeln für die beiden anderen nicht.

Die robots.txt-Zeilen

So erlauben Sie Amazonbot:

User-agent: Amazonbot
Allow: /

So sperren Sie Amazonbot:

User-agent: Amazonbot
Disallow: /

Fügen Sie einen Block in die robots.txt im Stammverzeichnis Ihres Hosts ein, zum Beispiel https://example.com/robots.txt. Eine Gruppe für ein Token gilt nicht für die anderen Crawler desselben Betreibers.

Der User-Agent-String laut Betreiber:

Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Amazonbot/0.1) Chrome/W.X.Y.Z Safari/537.36

Woran Sie eine echte von einer gefälschten Anfrage unterscheiden

Amazon veröffentlicht die Adressen für Amazonbot und, auf eigenen Seiten, für Amzn-SearchBot und für Live-Abrufe. Die Listen sind HTML-Seiten, keine JSON-Datei, deshalb nennen wir keine Anzahl. Amazon sagt außerdem: Wenn robots.txt Amzn-SearchBot nicht erwähnt, aber andere Suchbots zulässt, crawlt Amzn-SearchBot nach dieser Datei.

Vergleich mit DuckAssistBot

DuckAssistBot: Ein weiterer Abruf-Bot für KI-Antworten mit angegebenem Opt-out und 72 Stunden Verzögerung.

Ihre eigene Website

Der kostenlose Check im Kasten oben testet acht Crawler (GPTBot, OAI-SearchBot, ChatGPT-User, PerplexityBot, ClaudeBot, Google-Extended, Bingbot und Googlebot). Amazonbot gehört nicht dazu: Lesen Sie Ihre robots.txt auf eine Gruppe Amazonbot und suchen Sie den User-Agent in Ihrem Server-Log. Die vollständige Liste der Crawler steht im KI-Crawler-Verzeichnis.

Häufige Fragen

Befolgt Amazonbot die robots.txt?

Ja, Änderungen brauchen etwa 24 Stunden. Geben Sie Amazonbot in der robots.txt eine eigene User-agent-Gruppe: Die anderen Crawler desselben Betreibers haben jeweils eigene Einstellungen.

Woher weiß ich, dass Amazonbot wirklich gesperrt ist?

Die robots.txt ist nur eine Ebene: Auch eine CDN- oder Firewall-Regel kann einen Crawler abweisen, und ein Crawler kann die Datei ignorieren. Suchen Sie den User-Agent in Ihrem Server-Log und testen Sie die Adresse von außerhalb Ihres Netzes.

Quellen

• Amazon: About Amazonbot
• developer.amazon.com/amazonbot/ip-addresses