CitevanaBot

كيف تتعرّف عليه

يرسل CitevanaBot ترويسة User-Agent هذه مع كل طلب: CitevanaBot/0.1 (+https://citevana.com/bot)

الاسم المستخدم في robots.txt هو CitevanaBot.

عنوان IP (الحالي)

يتصل CitevanaBot حاليًا من عنوان IP التالي: 187.77.220.186. ويتصل عبر IPv4 فقط.

قد يتغير العنوان إذا نقلنا الخوادم أو أضفنا غيرها. تعرض هذه الصفحة دائمًا العنوان الحالي، فراجعها عند مراجعة قائمة السماح.

ما الذي يجلبه CitevanaBot

لا يجلب CitevanaBot إلا عناوين URL التي يرسلها الأشخاص إلى أدوات Citevana، إضافةً إلى الملفات العامة ذات الصلة الوثيقة على الموقع نفسه، مثل /robots.txt و/llms.txt، وكذلك، لأغراض تدقيق المواقع، المواقع التي تحقق مالكوها منها في Citevana. ولا يتصفح الويب من تلقاء نفسه.

robots.txt

تلتزم ميزات الزحف، مثل تدقيق المواقع، بقواعد robots.txt. أما الفحص لمرة واحدة لعنوان URL واحد فيطلبه شخص، تمامًا مثل فتح الصفحة في المتصفح. لحظر ميزات الزحف في CitevanaBot، أضف ما يلي إلى ملف robots.txt: User-agent: CitevanaBot / Disallow: /

لماذا قد يحظره جدار الحماية

قد تعرض خدمات حماية البوتات، مثل Bot Fight Mode ووضع “Under Attack” والتحديات المُدارة في Cloudflare، أو جدران حماية تطبيقات الويب الأخرى، صفحة تحدٍّ على CitevanaBot بدلًا من صفحتك. لا يحاول CitevanaBot أبدًا حل هذه الفحوص أو الالتفاف عليها. يتوقف التدقيق ويخبر صاحب الموقع بما يجب تغييره، ولا تُخصم الصفحات التي لم تُفحص من حصة التدقيق.

كيف تسمح لـ CitevanaBot في Cloudflare

• في لوحة تحكم Cloudflare، افتح نطاقك وانتقل إلى Security ← Security rules ← Create rule ← Custom rules (في اللوحات الأقدم: Security ← WAF ← Custom rules).
• استخدم هذا التعبير: (http.user_agent contains "CitevanaBot"). لقاعدة أكثر صرامة تتحقق أيضًا من عنوان IP الحالي الخاص بنا، استخدم: (http.user_agent contains "CitevanaBot" and ip.src in {187.77.220.186})
• اختر الإجراء Skip وحدّد All remaining custom rules وAll rate limiting rules وAll Super Bot Fight Mode rules وAll managed rules (وكذلك Browser Integrity Check إن ظهر). انشر القاعدة وانقلها إلى الأعلى.
• لا يمكن لأي قاعدة تخطي Bot Fight Mode، وهو إعداد الخطة المجانية. أوقفه أثناء التدقيق، أو استخدم Super Bot Fight Mode (خطة Pro فأعلى) الذي تشمله قاعدة Skip.
• إذا كان وضع “Under Attack” مفعّلًا، فسيتلقى كل زائر تحديًا: أوقفه أثناء التدقيق. تستطيع Configuration Rules في Cloudflare تغيير Security Level للطلبات المطابقة، لذا قد تنجح أيضًا قاعدة لـ CitevanaBot بمستوى Security Level أقل، لكننا لم نتحقق من ذلك.

جدران الحماية وشبكات CDN الأخرى

في Akamai أو Imperva أو Sucuri أو DataDome أو HUMAN (PerimeterX) أو AWS WAF أو جدار الحماية لدى مزوّد الاستضافة، أضف قاعدة سماح أو تجاوز للطلبات التي يحتوي User-Agent فيها على CitevanaBot. إن أمكن، اقصر القاعدة على عنوان IP أعلاه، لأن أي شخص يستطيع نسخ وكيل المستخدم.

الحدود والضمانات

• لا يتصل إلا بعناوين الإنترنت العامة، عبر HTTP أو HTTPS على المنافذ القياسية.
• يتبع 5 عمليات إعادة توجيه على الأكثر، ويتوقف بعد 8 ثوانٍ، ويقرأ 2 ميغابايت على الأكثر من كل استجابة.
• ترسل عمليات تدقيق المواقع طلبين على الأكثر في الوقت نفسه، وتنتظر بين الطلبات، وتلتزم بـ Crawl-delay (حتى 5 ثوانٍ)، وتبطئ عندما يرد الموقع بأن “الطلبات كثيرة جدًا”.
• تخضع طلبات الأدوات المجانية لحدود على معدل الطلبات.
• لا يسجّل الدخول، ولا يرسل النماذج، ولا يحاول تجاوز اختبارات CAPTCHA أو أنظمة الحماية من الروبوتات.
• لا يستخلص نتائج بحث Google.
• يتعامل مع محتوى الصفحات كبيانات فقط، ولا يعدّه تعليمات أبدًا.

التواصل

إذا تسبب CitevanaBot في مشكلة لموقعك، فراسلنا على hello@citevana.com مع عناوين URL المتأثرة ووقت حدوث المشكلة، وسنتحقق من الأمر.

الأسئلة الشائعة