Wer crawlt hier?
PfadfindrBot ruft Websites ab, um SEO-, KI-Sichtbarkeits- und Barrierefreiheits-Audits zu erstellen. Er crawlt nicht auf eigene Faust und baut keinen Suchindex auf.
Ein Audit startet nur, wenn ein Pfadfindr-Kunde es für eine Domain anlegt, meist der Betreiber der Website oder eine von ihm beauftragte Agentur. Pro Audit ruft der Bot eine begrenzte Zahl von Seiten ab, mit Pausen zwischen den Abrufen.
So erkennst du ihn
Der User-Agent enthält immer den Namen PfadfindrBot:
Mozilla/5.0 (compatible; PfadfindrBot/1.0; +https://pfadfindr.com/bot)
robots.txt
PfadfindrBot beachtet die robots.txt. Er folgt den Regeln für „PfadfindrBot“, sonst den Regeln für alle Crawler („*“).
Pfadfindr erlauben, auch wenn andere Crawler gesperrt sind:
User-agent: PfadfindrBot Allow: / User-agent: * Disallow: /
Pfadfindr sperren:
User-agent: PfadfindrBot Disallow: /
Ist die Startseite gesperrt, bricht der Audit ab und der Kunde sieht einen Hinweis, wie er PfadfindrBot freigeben kann.
IP-Adresse
Für Firewalls und Bot-Schutz: PfadfindrBot crawlt von dieser Adresse aus:
Kontakt
Fragen oder Beschwerden zu PfadfindrBot? Schreib uns, gern mit Domain und Zeitpunkt der Abrufe: