İndekslenebilirlik Kontrolcüsü

Dizine eklenebilirliği kontrol et
Sonraki

Bir sayfa mükemmel olabilir ancak arama motorları tarafından görünmez; bunun nedeni tek bir etiketin “noindex” yazması ya da robots.txt dosyasının tarayıcıların erişimini engellemesi olabilir. Bir URL yapıştırın ve bu kontrol aracı Google’un kullandığı tüm belirteçleri – robots.txt dosyası, meta robots etiketi, X-Robots-Tag başlığı, kanonik hedef adresi ve HTTP durumu – değerlendirerek sayfanın indekslenebilir olup olmadığını, neden olmadığını ve indekslenemiyorsa neyi değiştirmeniz gerektiğini belirtir.

Endekslenebilirliği nasıl kontrol eder?

  1. 1

    Bir URL girin

    Checker, URL'yi Googlebot'un yaptığı gibi alır.

  2. 2

    Yönlendirmeleri çözer.

    301/302 hop zinciri izlenmiştir; son URL değerlendirilen URL'dir.

  3. 3

    Her indekslenebilirlik sinyalini okur.

    Robots.txt kuralları, meta robots, X-Robots-etiketi, kanonik format, durum kodu.

  4. 4

    Karar ve Gerekçe

    İndekslenebilir / indekslenemez / kısmi; kararın verilmesine neden olan kesin sinyal bilgisiyle birlikte.

İndekslenebilirlik sinyalleri ve öncelikleri

Google, belirli bir sırayla bir dizi sinyali değerlendirir; zincirde tek bir negatif değer bile indekslenmenin engellenmesi için yeterlidir.

Sinyal Değerlendirme Sırası

  1. HTTP durumu: 2xx gereklidir. 3xx dizileri uygulanır; 4xx ve 5xx indeksleme sürecini sonlandırır.
  2. robots.txt: Eğer bu URL Googlebot için yasaklanırsa sayfa asla taranmaz; bu da sayfadaki noindex etiketlerinin hiç görülmemesi anlamına gelir.
  3. X-Robots Etiketi: HTTP yanıt başlıklarındaki noindex etiketi indekslenmeyi engeller.
  4. Meta robotları: <meta name="robots" content="noindex"> indekslenmeyi engeller.
  5. Kanonik: Başka bir yere işaret eden kanonik bir bağlantı, Google’ın o URL’yi indekslediğini gösterir.
  6. İçerik kalitesi ve tekrar tespiti: Google, açık talimatlar olmaksızın bile indeksleme işleminden kaçabilir.

Bu tür hataların yaygın örnekleri

Sorun Neden
Tüm bölüm indekslenmemiştir robots.txt dosyasındaki Disallow: kuralı
Belirli sayfa indekslenmemiştir Meta robots’teki noindex
Yanlış URL ile indekslenmiştir Kanonik adres başka bir yerde yer almaktadır
5xx seviyesinde durdu Sunucu hataı sayfa taramasını engelledi
İzin verilmeme + noindex çatışması Robots.txt dosyası tarayışı engeller, noindex etiketi asla okunmaz
Üretime sıralama sızıntıları Test ortamından kalan X-Robots-Tag: noindex

robots.txt + noindex tuzakı

Eğer robots.txt dosyasında bir URL’yi Disallow: olarak belirttiyseniz, Google bu URL’i hiç taramaz ve bu nedenle noindex etiketini görmez. Bu URL, yalnızca URL ve hiçbir açıklama içermeyen “boş” bir giriş olarak arama sonuçlarında görülebilir. Bir URL’i indeksden doğru şekilde silmek için önce taranmasına izin verin ve noindex etiketini kullanın; ardından Google tarafından indeksden çıkarıldıktan sonra taranmayı engelleyin.

Googlebot açısından test

Checker, herhangi bir sunucu tarafında uygulanan “yalnızca tarayıcılar X’yi görür” gibi yöntemlerin görülebilmesi için Googlebot kullanıcı ajanını gönderir. Her zaman test ortamı yerine üretim ortamındaki URL’leri doğrulayın.

Sık Sorulan Sorular

İndekslenebilir olmak, yalnızca teknik bir engelin bulunmadığını gösterir; ancak indekslenmeyi garanti etmez. Google ayrıca algılanan içerik kalitesi, tekrarlanan içerikler ve tarayış bütçesi gibi faktörlere göre karar verir. Google’dan kesin bir yanıt almak için Search Console’un URL İnceleme özelliği kullanın.

Genellikle yalnızca meta robotlar (veya X-Robot Tag) doğru çözümdür. Robots.txt dosyası sayfa taramasını engeller; meta robot etiketi ise indekslenmeyi engeller. İndekslenmemesi gereken sayfalar için taramayı izin verin ki Google noindex etiketinizi okuyabilsin.

Google, yönlendirme zincirinin son hedefini değerlendirir. A’dan B’ye giden bir 301 dönüşümü, Google’un nihayetinde A değil, B’yi indekslediğini gösterir. Bu durumu değerlendirmeden önce tüm yönlendirmeleri çözerek simüle eder.

Kimlik doğrulamasını gerektiren sayfalar tanıma gereği endekslenemez. Bu sayfalar için SEO gerekiyorsa, kamuya açık bir ön sürümünü değerlendirmelisiniz.

İlgili Araçlar

Araç diğer dillerde mevcuttur