CitevanaBot

Cara mengenalinya

CitevanaBot mengidentifikasi dirinya dengan string user-agent yang diawali "CitevanaBot" dan menautkan ke halaman ini (https://citevana.com/bot).

Apa yang diambil CitevanaBot

CitevanaBot hanya mengambil URL yang dikirimkan orang ke alat Citevana, ditambah file publik terkait di situs yang sama, seperti /robots.txt dan /llms.txt, serta, untuk audit situs, situs web yang pemiliknya telah memverifikasinya di Citevana. Bot ini tidak menjelajah web sendiri.

robots.txt

Fitur crawling, seperti audit situs, mematuhi aturan robots.txt. Pemeriksaan satu kali untuk satu URL diminta oleh seseorang, mirip dengan membuka halaman di browser. Untuk memblokir fitur crawling CitevanaBot, tambahkan ini ke robots.txt Anda: User-agent: CitevanaBot / Disallow: /

Batasan dan pengamanan

• Bot hanya terhubung ke alamat internet publik, melalui HTTP atau HTTPS pada port standar.
• Bot mengikuti paling banyak 5 pengalihan, berhenti setelah 8 detik, dan membaca paling banyak 2 MB per respons.
• Permintaan alat gratis dibatasi frekuensinya.
• Bot tidak masuk ke akun, tidak mengirim formulir, dan tidak mencoba melewati CAPTCHA atau perlindungan bot.
• Bot tidak melakukan scraping hasil penelusuran Google.
• Bot memperlakukan konten halaman hanya sebagai data, tidak pernah sebagai instruksi.

Kontak

Jika CitevanaBot menimbulkan masalah pada situs Anda, kirim email ke hello@citevana.com beserta URL yang terdampak dan waktunya, dan kami akan menyelidikinya.