Amazonbot is a search crawler operated by Amazon. Builds the index an assistant searches when it answers. Blocking this is the expensive one. It is how you get retrieved and cited in answers happening right now, so blocking it removes you from them.

What is Amzn-SearchBot?

Amzn-SearchBot is a search crawler operated by Amazon. Builds the index an assistant searches when it answers. Blocking this is the expensive one. It is how you get retrieved and cited in answers happening right now, so blocking it removes you from them.

NovaAct is a user-triggered crawler operated by Amazon. Fetches your page because someone asked about it just now. Blocking this means a person who explicitly asked an assistant about your page gets told it could not be read.

Crawlers van Amazon

Amazon gebruikt 3 crawlers die je site kunnen bereiken. Ze doen verschillende taken, dus één algemene regel is bijna altijd de verkeerde keuze.

User-agent	Type	Wat hij doet
`Amazonbot`	Zoeken	Bouwt de index die een assistent doorzoekt bij een antwoord.
`Amzn-SearchBot`	Zoeken	Bouwt de index die een assistent doorzoekt bij een antwoord.
`NovaAct`	Door gebruiker gestart	Haalt je pagina op omdat iemand er zojuist naar vroeg.

Wat het blokkeren kost

Zoeken: Blokkeren verwijdert je uit antwoorden van nu.
Door gebruiker gestart: Blokkeren betekent dat die persoon hoort dat de pagina niet gelezen kon worden.

robots.txt

Om elke crawler van Amazon toe te laten:

User-agent: Amazonbot
Allow: /

User-agent: Amzn-SearchBot
Allow: /

User-agent: NovaAct
Allow: /

Om ze allemaal te blokkeren:

User-agent: Amazonbot
Disallow: /

User-agent: Amzn-SearchBot
Disallow: /

User-agent: NovaAct
Disallow: /

robots.txt wordt vrijwillig gerespecteerd. Het is de juiste manier om je intentie te tonen, maar het regelt geen toegang. Bescherm gevoelige inhoud met authenticatie.

Bronnen

Is Amazon toegestaan op je site?

We lezen je robots.txt en vertellen welke AI-crawlers worden toegelaten. Geen registratie.