What is PerplexityBot?

PerplexityBot is a search crawler operated by Perplexity. Builds the index an assistant searches when it answers. Blocking this is the expensive one. It is how you get retrieved and cited in answers happening right now, so blocking it removes you from them.

What is Perplexity-User?

Perplexity-User is a user-triggered crawler operated by Perplexity. Fetches your page because someone asked about it just now. Blocking this means a person who explicitly asked an assistant about your page gets told it could not be read.

Crawler von Perplexity

Perplexity betreibt 2 Crawler, die Ihre Website erreichen können. Sie erledigen unterschiedliche Aufgaben; eine pauschale Regel für alle ist fast immer falsch.

User-Agent	Typ	Was er tut
`PerplexityBot`	Suche	Baut den Index auf, den ein Assistent beim Antworten durchsucht.
`Perplexity-User`	Nutzeranfrage	Ruft Ihre Seite ab, weil jemand gerade danach gefragt hat.

Was das Blockieren kostet

Suche: Blockieren entfernt Sie aus Antworten, die gerade entstehen.
Nutzeranfrage: Blockieren bedeutet, dass dieser Person gesagt wird, die Seite könne nicht gelesen werden.

robots.txt

Um jeden Perplexity-Crawler durchzulassen:

User-agent: PerplexityBot
Allow: /

User-agent: Perplexity-User
Allow: /

Um alle zu blockieren:

User-agent: PerplexityBot
Disallow: /

User-agent: Perplexity-User
Disallow: /

robots.txt wird freiwillig beachtet. Damit erklären Sie Ihre Absicht. Den Zugriff sperrt die Datei nicht, schützen Sie wirklich vertrauliche Inhalte daher durch Authentifizierung.

Quellen

Darf Perplexity auf Ihre Website?

Wir lesen Ihre robots.txt und sagen Ihnen, welche KI-Crawler sie durchlässt. Keine Anmeldung.