robots.txt'te yapay zeka botlarının erişimi kritik
Sitenin GPTBot, ClaudeBot, PerplexityBot ve Google-Extended botlarını engelleyip engellemediğini kontrol ediyoruz.
ChatGPT, Claude ve diğer AI'lar siteleri Google'dan farklı okur. Sitenizi 16 teknik noktada kontrol edip AI'nin sizi alıntılamasını neyin engellediğini göstereceğiz.
Kontrol 1–3 dakika sürer: sayfayı ve bağlı olduğu her şeyi tararız.
Sitenin GPTBot, ClaudeBot, PerplexityBot ve Google-Extended botlarını engelleyip engellemediğini kontrol ediyoruz.
Ham HTML içinde metin arıyoruz: yapay zeka botları komut dosyalarını çalıştırmaz.
Sayfayı hem tarayıcı hem de yapay zeka botu olarak isteyip yanıtları karşılaştırıyoruz.
/llms.txt dosyasını kontrol ediyoruz — dil modellerinin okuduğu, sitenin kısa bir haritası.
Ana sayfanın 200 yanıtı verdiğini ve bir yönlendirme zincirinin arkasına saklanmadığını kontrol ediyoruz.
HTTPS'in çalıştığını, sertifikanın geçerli olduğunu ve http'nin ona yönlendirdiğini kontrol ediyoruz.
Bir yapay zekaya içeriğin türünü ve yazarını bildiren yapılandırılmış verileri arıyoruz.
title, description, canonical, lang ve Open Graph öğelerini kontrol ediyoruz.
Tek bir H1, mantıklı bir başlık hiyerarşisi ve main/article/header etiketlerini kontrol ediyoruz.
Metin miktarını, bir güncelleme tarihinin ve adı belirtilmiş bir yazarın varlığını değerlendiriyoruz.
Sayfanın ne kadarının gerçek metin, ne kadarının işaretleme olduğu — zayıf sayfaları yapay zekanın okuması zordur.
Bir e-posta, telefon veya adresin görünür olup olmadığı — yapay zeka, "onlara nasıl ulaşılır" sorusunu sayfadakilerden yanıtlar.
Resmi sosyal hesaplara verilen bağlantılar, siteyi yapay zekanın zaten tanıdığı bir varlığa bağlar.
alt özniteliği olmayan görsellerin oranını hesaplıyoruz — bu olmadan ne yapay zeka ne de bir ekran okuyucu neyin resmedildiğini bilir.
Site haritasının var olduğunu, açıldığını ve robots.txt'te listelendiğini kontrol ediyoruz.
Yanıt süresini, HTML boyutunu ve sıkıştırmanın etkin olup olmadığını ölçüyoruz.
Her zaman değil: AI bir siteyi insandan farklı okur ve çoğu zaman onu hiç göremez. zikilo.com adresinde ücretsiz kontrol edin — bir dakikada rapor, kayıt yok.
Yaygın nedenler: site, robots.txt dosyasında AI tarayıcılarını engelliyor, tüm metin JavaScript ile yükleniyor (AI boş bir sayfa görür) ya da AI'ya ne yaptığınızı söyleyen Schema.org işaretlemesi yok.
Site adresinizi zikilo.com adresine girin — 16 teknik kontrol çalıştırır ve AI'nin sizi görmesini ve alıntılamasını neyin engellediğini gösterir.
Birisi onlara konunuzla ilgili soru sorduğunda AI asistanlarının (ChatGPT, Claude, Perplexity, Gemini) sitenizi bulup alıntılayıp alıntılamadığıdır. Özünde, AI çağı için SEO'dur.
SEO, Google'daki sıralamalarla ilgilidir. AI görünürlüğü ise sitenizin bir ChatGPT veya Perplexity yanıtına girip girmediğiyle ilgilidir. Giderek daha fazla insan bir arama motoru yerine AI'ya soruyor, bu yüzden ikisi de önemli.
robots.txt dosyasında AI tarayıcılarına izin verin, metni JavaScript olmadan sunun, Schema.org işaretlemesi, bir llms.txt dosyası ve sitemap.xml ekleyin. zikilo.com adresindeki ücretsiz kontrol, siteniz için tam listeyi gösterir.