PerplexityBot ist für Website-Betreiber die wichtigste Kennung von Perplexity. Er entscheidet mit, ob Ihre Seiten in den Antworten der KI-Suchmaschine als Quelle erscheinen können. Perplexity beschreibt den Crawler in seiner Entwicklerdokumentation knapp, und die Angaben unterscheiden sich in einem wichtigen Punkt von denen anderer Anbieter: Perplexity nennt keinen Crawler für das Training. Dieser Ratgeber erklärt, was PerplexityBot tut, wie er sich von Perplexity-User unterscheidet, wie Sie beide steuern und welchen Streit es 2025 um das Verhalten von Perplexity gab.
Was Perplexity über den Crawler schreibt
Laut Perplexity ist PerplexityBot dafür gedacht, Websites in den Suchergebnissen von Perplexity anzuzeigen und zu verlinken [1]. Er wird laut Dokumentation nicht verwendet, um Inhalte für KI-Basismodelle zu sammeln [1]. Perplexity empfiehlt, PerplexityBot in der robots.txt zuzulassen, wenn eine Website in den Ergebnissen erscheinen soll [1].
Der User-Agent lautet "Mozilla/5.0 (compatible; PerplexityBot/1.0; +https://perplexity.ai/perplexitybot)", wobei sich die Versionsnummer ändern kann [1]. Nach Änderungen an der robots.txt können laut Perplexity bis zu einem Tag vergehen, bis die Systeme sie berücksichtigen [1].
Die Antworten selbst setzt Perplexity aus einer Websuche in Echtzeit zusammen und versieht sie mit nummerierten Quellenangaben, die auf die Originalseiten verlinken [2]. Wer dort als Quelle stehen möchte, muss also für PerplexityBot erreichbar sein. Was darüber hinaus für Sichtbarkeit in Perplexity zählt, beschreibt der Ratgeber Perplexity SEO.
Perplexity-User: Abrufe für einzelne Fragen
Die zweite Kennung heißt Perplexity-User. Sie unterstützt Aktionen von Nutzern: Stellt jemand eine Frage, kann Perplexity damit eine Seite aufrufen, um die Antwort zu geben, und sie in der Antwort verlinken [1]. Perplexity-User wird laut Dokumentation weder zum Crawlen des Webs noch zum Sammeln von Inhalten für das Training von Basismodellen eingesetzt [1]. Der User-Agent enthält "Perplexity-User/1.0; +https://perplexity.ai/perplexity-user" [1].
Für die robots.txt ist ein Satz der Dokumentation entscheidend: Dieser Abrufer ignoriert die Regeln der robots.txt in der Regel [1]. Die Begründung ist dieselbe wie bei vergleichbaren Kennungen anderer Anbieter: Ein Mensch hat den Abruf ausgelöst. Eine Sperre von Perplexity-User in der robots.txt hat deshalb kaum Wirkung.
| Kennung | Zweck laut Perplexity | robots.txt | IP-Liste |
|---|---|---|---|
| PerplexityBot | Websites in Suchergebnissen anzeigen und verlinken | wird beachtet, Änderung wirkt nach bis zu einem Tag | www.perplexity.ai/perplexitybot.json |
| Perplexity-User | Seiten für einzelne Nutzerfragen abrufen | wird in der Regel ignoriert | www.perplexity.ai/perplexity-user.json |
Noch eine Frage offen?
In der gratis Sprechstunde beantworten wir Fragen zu SEO live, jeden ersten Samstag im Monat um 18 Uhr. Oder Sie rufen einfach an.
Regeln für die robots.txt
Für die meisten Unternehmen ist die Entscheidung einfach. Wer in Perplexity als Quelle erscheinen möchte, lässt PerplexityBot zu. Weil Perplexity laut eigener Angabe mit diesem Crawler kein Training betreibt, entfällt die Abwägung, die bei OpenAI oder Anthropic zwischen Such- und Trainingscrawler nötig ist [1].
Eine eigene Gruppe ist nur nötig, wenn eine allgemeine Regel den Crawler sonst aussperrt. Nach RFC 9309 folgt ein Crawler der Gruppe, deren User-agent-Zeile zu seinem Namen passt, und nur ohne passende Gruppe der Sterngruppe [3]. Steht also "User-agent: *" mit "Disallow: /" in der Datei, braucht PerplexityBot eine eigene Gruppe mit "Allow: /". Soll ein Bereich draußen bleiben, steht dort zum Beispiel "Disallow: /intern/". Den Namen vergleicht der Crawler ohne Rücksicht auf Groß- und Kleinschreibung [3]. Die robots.txt ist dabei kein Zugriffsschutz, das stellt die Norm ausdrücklich fest [3].
Firewall, CDN und IP-Listen
Websites können Perplexity sperren, ohne es zu wissen. Eine Firewall für Webanwendungen oder ein Bot-Schutz beim CDN blockiert unbekannte Programme, bevor die robots.txt überhaupt eine Rolle spielt. Perplexity weist darauf hin, dass Betreiber seine Bots dort unter Umständen ausdrücklich freigeben müssen [1].
Dafür veröffentlicht Perplexity je Kennung eine JSON-Datei mit IP-Bereichen [1]. Die Dokumentation rät, jeden User-Agent nur mit seinen eigenen IP-Bereichen abzugleichen, immer die aktuellen Bereiche aus den offiziellen Dateien zu verwenden und die Regeln der Firewall regelmäßig automatisch zu aktualisieren [1]. Eine Freigabe nur nach User-Agent wäre unsicher, weil sich jedes Programm PerplexityBot nennen kann. Wie Sie die Zugriffe in den Rohdaten finden, zeigt der Ratgeber KI-Crawler im Server-Log erkennen.
Der Streit mit Cloudflare
Im August 2025 erhob der CDN-Anbieter Cloudflare Vorwürfe gegen Perplexity. In einem Beitrag vom 04.08.2025 schrieb Cloudflare, Perplexity weiche bei Sperren auf nicht erklärte Crawler aus, die sich als gewöhnlicher Chrome-Browser auf macOS ausgäben und IP-Adressen außerhalb der offiziellen Liste nutzten [4]. Cloudflare nahm Perplexity daraufhin aus der Liste verifizierter Bots und ergänzte seine Regeln zum Blockieren von KI-Crawlern um Signaturen dieses Verhaltens [4].
Perplexity widersprach am selben Tag. In einem eigenen Beitrag unterschied das Unternehmen zwischen klassischen Crawlern und Agenten, die nur auf eine konkrete Anfrage eines Nutzers hin Inhalte holen [5]. Diese Agenten speicherten die Inhalte nicht und trainierten nicht damit [5]. Cloudflare habe außerdem täglich 3 bis 6 Millionen Anfragen des Cloud-Browser-Dienstes BrowserBase fälschlich Perplexity zugeordnet [5]. Beide Darstellungen lassen sich von außen nicht abschließend prüfen.
Für Betreiber heißt das: Die robots.txt regelt den erklärten Crawler. Wer bestimmte Abrufe wirklich verhindern will, braucht Regeln auf Server- oder CDN-Ebene. Wer dagegen gefunden werden will, sollte prüfen, dass solche Regeln PerplexityBot nicht versehentlich treffen.
In fünf Schritten prüfen, ob Perplexity Sie erreicht
- Öffnen Sie Ihre robots.txt und suchen Sie nach Gruppen für PerplexityBot und nach einer Sterngruppe mit weitreichenden Sperren. Gilt für PerplexityBot keine eigene Gruppe, greift die Sterngruppe.
- Fragen Sie beim Hoster oder in der Oberfläche Ihres CDN nach, ob ein Bot-Schutz aktiv ist und ob er KI-Crawler pauschal blockiert. Einige Anbieter bieten dafür eigene Schalter an.
- Suchen Sie in den Zugriffsprotokollen der letzten Wochen nach der Kennung PerplexityBot und sehen Sie sich die Statuscodes an. Viele Antworten mit 403 oder 429 deuten auf eine Sperre oder Drosselung hin.
- Gleichen Sie einige IP-Adressen dieser Zugriffe mit der Liste unter www.perplexity.ai/perplexitybot.json ab, damit Sie keinen Nachahmer für den echten Crawler halten.
- Stellen Sie in Perplexity eine Frage, auf die eine Ihrer Seiten die beste Antwort gibt, und sehen Sie nach, welche Quellen genannt werden. Das ist eine Stichprobe und kein Messwert, zeigt aber, ob Ihre Website grundsätzlich vorkommt.
Abrufe messen
Besuche von Menschen, die in Perplexity auf eine Quelle klicken, erscheinen in der Webanalyse in der Regel mit der Herkunft perplexity.ai. Matomo ordnet sie seit Version 5.5.0 dem Kanal "AI Assistants" zu [6]. Abrufe durch Perplexity-User zählt Matomo mit einer Erfassung auf dem Server als KI-Chatbot, die Kennung steht in Matomos Liste der erkannten Programme [7]. Die Einrichtung beschreibt der Ratgeber KI-Traffic in Matomo messen. Eine Übersicht aller KI-Crawler und ihrer Zwecke bietet KI-Crawler blockieren oder zulassen, den Dienst selbst erklärt das Glossar unter Perplexity.
Sie sind nicht sicher, ob Ihre Firewall oder Ihr CDN PerplexityBot durchlässt? Stellen Sie die Frage in der gratis Sprechstunde, dort beantworten wir Fragen zu robots.txt und Firewall.
- Organisation Perplexity Crawlers. Perplexity. Stand ohne Datum. abgerufen am 31.10.2026
- Organisation How does Perplexity work?. Perplexity Help Center. Stand ohne Datum. abgerufen am 31.10.2026
- Gesetz RFC 9309: Robots Exclusion Protocol. IETF. Stand 09.2022. abgerufen am 31.10.2026
- Organisation Perplexity is using stealth, undeclared crawlers to evade website no-crawl directives. Cloudflare Blog. Stand 04.08.2025. abgerufen am 31.10.2026
- Organisation Agents or Bots? Making Sense of AI on the Open Web. Perplexity. Stand 04.08.2025. abgerufen am 31.10.2026
- Organisation What's new in Matomo 5.5.0. Matomo. Stand 08.10.2025. abgerufen am 31.10.2026
- Organisation Install AI chatbot tracking in WordPress. Matomo. Stand ohne Datum. abgerufen am 31.10.2026
Häufige Fragen
Trainiert Perplexity mit PerplexityBot seine Modelle?
Laut Perplexity nicht. Die Dokumentation schreibt, dass PerplexityBot nicht zum Sammeln von Inhalten für KI-Basismodelle eingesetzt wird.
Was passiert, wenn ich PerplexityBot sperre?
Dann kann Perplexity Ihre Seiten nicht für seine Suchergebnisse erfassen. Abrufe durch Perplexity-User für einzelne Nutzerfragen beachten die robots.txt laut Perplexity in der Regel nicht.
Wie lange dauert es, bis eine Änderung an der robots.txt wirkt?
Perplexity nennt bis zu einem Tag.
Wie erkenne ich einen echten PerplexityBot?
Gleichen Sie die IP-Adresse mit den Bereichen in www.perplexity.ai/perplexitybot.json ab. Ein User-Agent allein beweist nichts, weil sich jedes Programm so nennen kann.
Muss ich PerplexityBot in der robots.txt ausdrücklich erlauben?
Nur wenn eine allgemeine Regel ihn sonst aussperrt. Ohne passende eigene Gruppe gilt für ihn die Sterngruppe.
Noch eine Frage offen?
In der gratis Sprechstunde beantworten wir Fragen zu SEO live, jeden ersten Samstag im Monat um 18 Uhr. Oder Sie rufen einfach an.
Zuletzt geprüft am 03.11.2026, nächste Prüfung spätestens im November 2027. Haben Sie einen Fehler entdeckt? Schreiben Sie uns.
