CitevanaBot

So erkennen Sie ihn

CitevanaBot gibt sich mit einem User-Agent zu erkennen, der mit „CitevanaBot“ beginnt und auf diese Seite verweist (https://citevana.com/bot).

Was CitevanaBot abruft

CitevanaBot ruft nur URLs ab, die Nutzer in die Tools von Citevana eingeben, sowie zugehörige öffentliche Dateien derselben Website wie /robots.txt und /llms.txt. Er durchsucht das Web nicht eigenständig. Nach dem Start wird er zusätzlich Websites crawlen, die ihre Inhaber in Citevana verifiziert haben, um Website-Audits durchzuführen.

robots.txt

Crawling-Funktionen wie Website-Audits beachten die Regeln der robots.txt. Eine einmalige Prüfung einer einzelnen URL wird von einer Person angefordert, ähnlich wie das Öffnen der Seite im Browser. Um die Crawling-Funktionen von CitevanaBot zu sperren, ergänzen Sie Ihre robots.txt um: User-agent: CitevanaBot / Disallow: /

Grenzen und Schutzmaßnahmen

• Er verbindet sich nur mit öffentlichen Internetadressen, per HTTP oder HTTPS über Standardports.
• Er folgt höchstens 5 Weiterleitungen, bricht nach 8 Sekunden ab und liest höchstens 2 MB pro Antwort.
• Anfragen über die kostenlosen Tools sind begrenzt.
• Er meldet sich nicht an, sendet keine Formulare ab und versucht nicht, CAPTCHAs oder Bot-Schutz zu umgehen.
• Er liest keine Google-Suchergebnisse aus.
• Er behandelt Seiteninhalte nur als Daten, nie als Anweisungen.

Kontakt

Falls CitevanaBot Probleme auf Ihrer Website verursacht, schreiben Sie an hello@citevana.com mit den betroffenen URLs und dem Zeitpunkt; wir kümmern uns darum.