YZ erişimi
ChatGPT, Perplexity, Claude ve Google'ın YZ cevapları yalnızca botlarının çekebildiği sayfalara atıf yapabilir. Bu ekran ilgili her botu sitenize karşı test eder ve kanıtıyla birlikte içeri girip giremediğini söyler.
Üç tür bot
- Arama botları sayfaları cevaplarda atıf yapmak için çeker: OAI-SearchBot (ChatGPT arama), Claude-SearchBot, PerplexityBot, Googlebot (AI Overviews için de kullanılır), Bingbot (Copilot), Applebot, DuckAssistBot.
- Kullanıcı botları bir sohbet içinde kullanıcının isteği üzerine sayfa çeker: ChatGPT-User, Claude-User, Perplexity-User, MistralAI-User.
- Eğitim botları model eğitimi için veri toplar: GPTBot, ClaudeBot, Google-Extended, Meta-ExternalAgent, Amazonbot, CCBot, Bytespider.
Eğitim botlarını engellemek meşru bir tercihtir ve cevaplarda görünüp görünmemenizi etkilemez. Arama ya da kullanıcı botlarını engellemek ise etkiler.
İki kanıt düzeyi
robots.txt — kesin. Glimana robots.txt dosyanızı okur ve her botun user agent'ı için kuralları tam olarak botun yapacağı gibi değerlendirir. Bir bot için Disallow: / kesin bir engeldir.
Canlı istek — gösterge. Glimana ana sayfayı ve bir sayfa örneklemini her botun user-agent dizesiyle çeker; durum kodunu ve içeriğin normal bir çekimle eşleşip eşleşmediğini kaydeder. 403 ya da boş sayfa, bir güvenlik duvarının ya da bot yönetimi kuralının botu engellediğine dair güçlü bir işarettir; ama yalnızca bir göstergedir, çünkü isteğimiz YZ şirketinin IP aralığından değil Glimana'nın adresinden gelir ve bazı güvenlik duvarları (örneğin Cloudflare'in doğrulanmış bot mantığı) taklit edilmiş bir user agent'a gerçek bottan farklı davranır. 429 bir engel değil hız sınırlamasıdır ve asla engel olarak raporlanmaz.
Durum rozeti açık, kısmen engelli (örneklenen sayfaların bir kısmı engelli, bir kısmı değil) ya da engelli yazar; yanında kesin ya da gösterge bulunur. Örnekleri göster, test edilen URL'leri durum kodlarıyla listeler.
Tercihiniz
Her bulgunun derecesi, site ayarlarındaki Yapay zekâ görünürlüğü tercihine göre belirlenir:
| Tercih | Engellenmiş arama/kullanıcı botu | Engellenmiş eğitim botu | Her şey açık |
|---|---|---|---|
| YZ cevaplarında görünmek istiyorum | Yüksek önemde sorun | Bilgi | — |
| Cevaplarda görün, eğitimi engelle | Yüksek önemde sorun | Raporlanmaz | Bir eğitim botu hâlâ açıksa bilgi |
| Tüm YZ botlarını engelle | — | — | Hâlâ açık olan her bot için bilgi |
| Fark etmez | Bilgi | Bilgi | — |
Bunu bu sayfadaki değiştir linkiyle ya da Site ayarları → Genel bölümünden değiştirin.
Bu ekrandaki kurallar
AI-01 arama botu engelli · AI-02 eğitim botu engelli · AI-03 bot güvenlik duvarı/WAF tarafından engelli (gösterge) · AI-04 bilinmeyen botlar toptan bir kuralla engelli · AI-05 bota farklı içerik sunuldu (cloaking) · AI-06 Google-Extended engelli · AI-07 engellemeyi seçmenize rağmen YZ botları hâlâ açık · AI-08 kullanıcı botu engelli. Her birinin, barındırma kurulumuna göre birebir çözümü veren bir sorun rehberi vardır.
Bir engeli kaldırma
robots.txt engeli: o user agent için Disallow kuralını kaldırın ya da daraltın. Değişiklikler bir sonraki testte algılanır.
Güvenlik duvarı engeli: Cloudflare'de Security → Bots ("Block AI bots" anahtarı) ya da user agent ile eşleşen WAF kuralı; diğer WAF'larda eşdeğer bot kategorisi kuralı. Ardından Yeniden test'e tıklayın.
Testler haftalık (Pazar 03:00) ve istek üzerine Yeniden test ile çalışır. Son test zamanı başlığın altında gösterilir.
PDF rapor
PDF rapor, bot tablosunu bir müşteri ya da barındırma sağlayıcısı için dışa aktarır: her bot için robots.txt kararı, canlı istek sonucu, durum ve iki kanıt düzeyini birbirinden ayıran bir Dayanak sütunu içeren bir satır; kırmızıyla Kesin (robots.txt), kehribar renkle Gösterge (canlı istek). Güvenlik duvarı engeli, Glimana'nın kendi sunucusundan yapılan bir isteğe dayandığı için asla kesin engel olarak değil, gösterge olarak gösterilir. Aynı tablo, panonun tam raporundaki YZ erişimi bölümüdür. Henüz test çalışmadıysa ve YZ görünürlüğü tercihi "Fark etmez" olan sitelerde düğme gizlenir, çünkü belge boş olurdu.