Für Webmaster

RankDossierBot

RankDossierBot ist der Crawler, mit dem wir SEO-Audits im Auftrag unserer Kunden durchführen. Er crawlt nur öffentlich zugängliche Inhalte – offen und rücksichtsvoll.

Wie er sich identifiziert

RankDossierBot/1.0 (+https://rankdossier.com/bot)

Beachtet robots.txt und Crawl-delay.
Höchstens 2 Anfragen pro Sekunde und 2 gleichzeitige Verbindungen pro Website (bis zu 5 pro Sekunde nur für Inhaber mit Inhabernachweis).
Bei 429/503 halbiert er das Tempo und beachtet Retry-After.
Umgeht weder Cloudflare noch CAPTCHA oder andere Schutzmaßnahmen.
Sammelt keine personenbezogenen Daten und sendet keine Formulare ab.

So erlaubst oder blockierst du uns

Um ein vollständiges Audit zu erlauben, füge Folgendes in deine robots.txt ein:

User-agent: RankDossierBot
Allow: /

Wenn deine Website gar nicht geprüft werden soll, nutze das Ausschlussformular oder schreib uns an contact@rankdossier.com.