Ücretsiz araç · kayıt gerekmez
Web sitenize hangi yapay zekâ tarayıcıları erişebilir?
Alan adınızı girin; robots.txt dosyanızı tarayıcıların okuduğu şekilde (RFC 9309) okuyalım ve her büyük yapay zekâ user agent'ına izin verilip verilmediğini, kısmen mi yoksa tamamen mi engellendiğini gösterelim. Sayfalarınızın kaynak gösterilmesi için yapay zekâ arama ajanlarının ve kullanıcı isteğiyle sayfa getiren ajanların erişime ihtiyacı vardır; eğitim tarayıcıları ise ayrıca verebileceğiniz bir karardır.
Son inceleme: 16 Eylül 2026
Yapay zekâ tarayıcı denetleyicisi
Nasıl çalışır?
Alan adınızdan /robots.txt dosyasını getirir; user-agent gruplarını, allow ve disallow kurallarını, joker karakterleri ve sitemap satırlarını ayrıştırırız.
Her yapay zekâ user agent'ı için ana sayfanızda ve birkaç yaygın yolda, en spesifik eşleşen grubu (veya * grubunu) ve en uzun eşleşen kuralı uygularız.
Sade bir özet, önceliğe göre sıralanmış bir yapılacaklar listesi ve her botun operatörünü, amacını ve durumunu gösteren, operatörün kendi belgelerine bağlantı veren bir tablo alırsınız.
Sıkça sorulan sorular
Yapay zekâ tarayıcısı nedir?
Bir yapay zekâ şirketinin çalıştırdığı otomatik bir istemcidir. Bazıları model eğitimi için içerik toplar (ör. GPTBot veya ClaudeBot), bazıları yapay zekâ yanıtları için arama dizinleri oluşturur (ör. OAI-SearchBot, Claude-SearchBot veya PerplexityBot), bazıları ise bir sayfayı yalnızca kullanıcı istediğinde getirir (ör. ChatGPT-User veya Claude-User).
Yapay zekâ tarayıcılarını engellemeli miyim?
Hedeflerinize bağlıdır. Yapay zekâ yanıtlarında kaynak gösterilmek istiyorsanız arama ajanlarına ve kullanıcı isteğiyle çalışan ajanlara izin verin. Eğitim tarayıcılarını engellemek ayrı bir iş kararıdır; OpenAI, Anthropic ve Google gibi operatörler seçim yapabilmeniz için ayrı belirteçler tanımlar.
Yalnızca yapay zekâ eğitimini nasıl engellerim?
Her eğitim belirteci için bir grup ekleyin; örneğin "User-agent: GPTBot" ve ardından "Disallow: /". Google, Google-Extended belirtecinin Gemini eğitimi ve temellendirmesinde kullanımı kontrol ettiğini ve Google Arama sıralamasını etkilemediğini belirtir.
robots.txt bir botun siteye girmemesini garanti eder mi?
Hayır. robots.txt gönüllülüğe dayalı bir standarttır. Burada listelenen operatörler ona uyduklarını belirtir, ancak bir erişim denetimi değildir; gizli kalması gereken içerik için kimlik doğrulama veya güvenlik duvarı kuralları kullanın.
Citevana yapay zekâ tarayıcı denetleyicisi ücretsiz mi?
Evet. Hesap olmadan ücretsiz kullanılabilir; kötüye kullanımı önlemek için cömert bir günlük sınırı vardır.