Amazonbot is a search crawler operated by Amazon. Builds the index an assistant searches when it answers. Blocking this is the expensive one. It is how you get retrieved and cited in answers happening right now, so blocking it removes you from them.

What is Amzn-SearchBot?

Amzn-SearchBot is a search crawler operated by Amazon. Builds the index an assistant searches when it answers. Blocking this is the expensive one. It is how you get retrieved and cited in answers happening right now, so blocking it removes you from them.

NovaAct is a user-triggered crawler operated by Amazon. Fetches your page because someone asked about it just now. Blocking this means a person who explicitly asked an assistant about your page gets told it could not be read.

Crawler von Amazon

Amazon betreibt 3 Crawler, die Ihre Website erreichen können. Sie erledigen unterschiedliche Aufgaben; eine pauschale Regel für alle ist fast immer falsch.

User-Agent	Typ	Was er tut
`Amazonbot`	Suche	Baut den Index auf, den ein Assistent beim Antworten durchsucht.
`Amzn-SearchBot`	Suche	Baut den Index auf, den ein Assistent beim Antworten durchsucht.
`NovaAct`	Nutzeranfrage	Ruft Ihre Seite ab, weil jemand gerade danach gefragt hat.

Was das Blockieren kostet

Suche: Blockieren entfernt Sie aus Antworten, die gerade entstehen.
Nutzeranfrage: Blockieren bedeutet, dass dieser Person gesagt wird, die Seite könne nicht gelesen werden.

robots.txt

Um jeden Amazon-Crawler durchzulassen:

User-agent: Amazonbot
Allow: /

User-agent: Amzn-SearchBot
Allow: /

User-agent: NovaAct
Allow: /

Um alle zu blockieren:

User-agent: Amazonbot
Disallow: /

User-agent: Amzn-SearchBot
Disallow: /

User-agent: NovaAct
Disallow: /

robots.txt wird freiwillig beachtet. Damit erklären Sie Ihre Absicht. Den Zugriff sperrt die Datei nicht, schützen Sie wirklich vertrauliche Inhalte daher durch Authentifizierung.

Quellen

Darf Amazon auf Ihre Website?

Wir lesen Ihre robots.txt und sagen Ihnen, welche KI-Crawler sie durchlässt. Keine Anmeldung.