Yapay Zekâ Görünürlük Kontrolü
Yapay zekâ botlarının sitenizi tarayıp taramadığını robots.txt üzerinden tek ekranda görün.
Bu araç sitenizin robots.txt dosyasını okuyup dört yapay zekâ botunun izin durumunu gösterir: OpenAI'nin GPTBot'u, Anthropic'in ClaudeBot'u, Perplexity'nin PerplexityBot'u ve Google'ın kendi arama ürünlerinde (AI Overviews, Gemini) içerik kullanımını kontrol eden Google-Extended'ı. Bir bot engellenmişse o hizmet sitenizin içeriğini görmez ve yanıtlarında sizi kaynak gösteremez.
Ayrıca üç ek noktaya bakar: llms.txt dosyanız var mı (bu, yapay zekâ sistemlerine sitenizi özetlemek için ortaya çıkan, henüz resmi bir standart olmayan bir uygulamadır), site haritanız (sitemap.xml) erişilebilir mi, sayfalarınızda yapılandırılmış veri (schema.org) işaretlemesi var mı. Yapılandırılmış veri, arama motorlarının ve yapay zekâ sistemlerinin içeriğinizin ne olduğunu (makale, ürün, sık sorulan soru) daha net anlamasını sağlar.
Bu kontrol yalnızca izin ayarlarını okur; botların sitenizi fiilen ne sıklıkla ziyaret ettiğini ya da yanıtlarda ne kadar sık göründüğünüzü ölçmez. robots.txt'te izin vermek görünürlüğü garanti etmez, yalnızca engeli kaldırır; içeriğin kendisi hâlâ açık, doğru ve alıntılanabilir olmalıdır.
Nasıl kullanılır
- Sitenizin adresini girin.
- Denetimi başlatın, robots.txt otomatik okunsun.
- Dört bottan hangilerinin engellendiğini görün.
- llms.txt, site haritası ve yapılandırılmış veri durumunu inceleyin.
- Engelli bulduğunuz botu robots.txt dosyanızdan kaldırın.
Sık sorulanlar
GPTBot'u engellemek trafiğimi azaltır mı?
GPTBot'u engellemek ChatGPT'nin içeriğinizi eğitim ya da anlık yanıt için görmesini engeller; bunun mevcut arama trafiğinize etkisi olmaz çünkü bu farklı bir bot (Googlebot) tarafından yönetilir.
llms.txt zorunlu mu?
Hayır, henüz resmi bir standart değildir; bazı siteler yapay zekâ sistemlerine içerik özeti sunmak için ekliyor ama arama motorları ya da yapay zekâ sistemleri bunu okumayı garanti etmez.
Google-Extended'ı engellersem Google aramadan düşer miyim?
Hayır, Google-Extended yalnızca Gemini ve AI Overviews için içerik kullanımını kontrol eder; klasik Google aramasında görünmenizi etkilemez, o Googlebot'a bağlıdır.
Yapılandırılmış veri olmadan yapay zekâda görünemez miyim?
Görünebilirsiniz, ancak yapılandırılmış veri içeriğinizin türünü ve ilişkilerini daha net gösterdiği için doğru alıntılanma ihtimalini artırır.
