Sayfa İndekslenebilirlik Kontrolü

Bir Sayfa Neden İndekslenmeyebilir?

Bir sayfanın Google'da görünmemesinin dört yaygın teknik nedeni vardır: robots.txt tarafından taranmasının engellenmesi, meta robots noindex etiketi, X-Robots-Tag HTTP başlığı veyafarklı bir sayfayı işaret eden canonical etiketi. Bu dört sinyal genelde birbirinden bağımsız ayarlanır, bu yüzden bir CMS güncellemesi veya tema değişikliği sonrası fark edilmeden birinin devreye girmesi mümkündür.

Sinyaller Çelişince Ne Olur?

Örneğin bir sayfa hem robots.txt ile engellenip hem de meta etiketinde "index" yazıyorsa, robots.txt kazanır — Google sayfayı hiç tarayamadığı için içindeki meta etiketi göremez bile. Bu yüzden kontrol sırası önemlidir.

İndekslenebilirlik Sinyalleri Öncelik Sırası

Sayfa İndekslenebilirlik Kontrolü Nasıl Çalışır?

Bu sayfa indekslenebilirlik kontrolü aracı, girdiğiniz URL'yi tarayarak indekslenmeyi etkileyen dört temel sinyali sırasıyla kontrol eder: önce sitenizin robots.txt dosyasında bu sayfanın taranmasının engellenip engellenmediğine bakar, ardından sayfanın HTML kaynağındaki meta robots etiketini ve sunucu yanıtındaki X-Robots-Tag HTTP başlığını kontrol eder, son olarak canonical etiketininsayfanın kendisini mi yoksa başka bir URL'yi mi işaret ettiğini doğrular. Bu dört kontrolün sonucunu birleştirerek sayfanın gerçekten indekslenebilir olup olmadığına dair net bir cevap verir.

Neden Sinyaller Arasında Öncelik Sırası Var?

Bu dört sinyal aynı ağırlıkta değildir ve birbirini geçersiz kılabilir. Eğer robots.txt bir sayfanın taranmasını tamamen engelliyorsa, Google o sayfanın içeriğine hiç erişemez — bu da sayfanın içindekimeta robots etiketinin "index" yazması durumunda bile hiçbir işe yaramayacağı anlamına gelir, çünkü Google bu etiketi hiç göremez. Bu çelişkili durum, birçok site sahibinin gözden kaçırdığı ve "neden sayfam indekslenmiyor" sorusunun cevabını bulmakta zorlandığı en sık karşılaşılan senaryolardan biridir.

Yaygın İndeksleme Sorunları ve Kaynakları

Unutulmuş "noindex" Etiketleri

Geliştirme veya test ortamında bir sayfaya bilinçli olarak eklenen noindex etiketi, sayfa canlıya alınırken kaldırılmayı unutulursa, sayfa aylarca Google'ın dizininin dışında kalabilir. Bu, özellikle yeni sayfa lansmanlarında sık karşılaşılan, fark edilmesi zor bir hatadır.

CMS Eklenti veya Tema Çakışmaları

Bazı SEO eklentileri veya temalar, belirli sayfa türlerine (örneğin arşiv sayfaları, etiket sayfaları) varsayılan olarak noindex uygulayabilir. Bir eklenti güncellemesi veya tema değişikliği sonrası bu varsayılan davranış değişebilir ve önceden indekslenen sayfalar farkında olmadan indeksten düşebilir.

Yanlış Yapılandırılmış Canonical Etiketleri

Bir sayfanın canonical etiketi yanlışlıkla başka bir (alakasız) URL'yi işaret ediyorsa, Google bu sayfayı indekslerken kendi URL'si yerine canonical'da belirtilen URL'yi tercih edebilir — bu da sayfanın arama sonuçlarında hiç görünmemesine yol açabilir.

Toplu Kontrolün Değeri

Büyük sitelerde, önemli sayfaların tamamını (ana sayfa, hizmet sayfaları, en çok trafik alan blog yazıları) düzenli aralıklarla bu araçla kontrol etmek, tek tek Google Search Console'da arama yapmaktan çok daha hızlı bir denetim süreci sunar. Özellikle bir site geneli güncelleme, CMS geçişi veya SEO eklenti değişikliğinden sonra bu tür bir toplu kontrol yapmak, olası indeksleme sorunlarını haftalar içinde değil, saatler içinde fark etmenizi sağlar.

Canonical yapılandırmanızı derinlemesine incelemek için Canonical Kontrol Aracı'nı, robots.txt dosyanızı test etmek için ise Robots.txt Test aracını kullanabilirsiniz.

Google Search Console ile Çapraz Doğrulama

Bu araç size sayfanın teknik indekslenebilirlik durumunu anlık olarak gösterse de, sayfanın gerçekten Google'ın dizininde olup olmadığını kesin biçimde teyit etmenin en güvenilir yolu Google Search Console'daki "URL İncelemesi" aracıdır. Bu araçla teknik engelleri temizledikten sonra, Search Console üzerinden sayfanın yeniden dizinlenmesini talep etmek, düzeltmenizin etkisini hızlandırabilir. İki aracı birlikte kullanmak — bu araçla hızlı teknik tarama, Search Console ile resmi doğrulama — en kapsamlı kontrol sürecini oluşturur.

İndekslenmeme Sorununu Çözdükten Sonra

Tespit ettiğiniz sorunu (robots.txt engeli, noindex etiketi, yanlış canonical) düzelttikten sonra, Google'ın değişikliği fark edip sayfayı yeniden taraması anında gerçekleşmez — bu süreç sitenizin genel tarama sıklığına bağlı olarak birkaç gün ile birkaç hafta arasında sürebilir. Bu bekleme süresini kısaltmak için Search Console üzerinden manuel dizin talebinde bulunabilir, ayrıca sayfaya diğer indekslenmiş sayfalardan iç bağlantılar ekleyerek botların sayfayı daha hızlı yeniden keşfetmesine yardımcı olabilirsiniz.

Konuyla ilgili daha fazla bilgi için Google Index Sorunları Nasıl Çözülür? yazımıza göz atabilirsiniz.