Bu makale, Google’ın robots.txt tarafından taranması engellenen sayfaları neden dizine eklediği ve bu taramaların ilgili Search Console raporlarını neden görmezden gelmenin güvenli olduğu konusunu ele alıyor. Google’ın John Mueller, robots.txt tarafından engellenen sayfaların neden dizine eklendiği ve bu durumun neden endişe yaratmaması gerektiği hakkında açıklamalarda bulunuyor.
Özellikle pazarlama ile ilgili işler yapan kişiler için bu makale önemli çünkü web sitelerinin arama motoru optimizasyonu (SEO) stratejilerini etkileyebilecek bilgiler içeriyor. İşte pazarlamacılar için önemli noktalar:
1. **Site:arama operatörünün sınırlamaları**: Mueller, site:arama operatörünün tanı koyma amaçlı kullanılmaması gerektiğini belirtiyor. Bu operatör, normal arama diziniyle bağlantılı değil ve bu nedenle sonuçlar tam ve güvenilir değil. Pazarlamacılar, SEO analizlerinde bu operatörü kullanırken dikkatli olmalı ve alternatif yöntemler aramalıdır.
2. **Noindex etiketi ve robots.txt kullanımı**: Noindex etiketi kullanmak, robots.txt kullanmadan da mümkündür. Bu, botların var olmayan sayfalara bağlantı verdiği durumlarda geçerlidir. Bu bilgi, pazarlamacıların web sitelerinin gereksiz sayfalarla dolmasını engellemelerine yardımcı olabilir.
3. **Search Console raporları**: Noindex etiketi olan URL’ler, Search Console’da “tarandı/dizine eklenmedi” olarak raporlanır ve bu durum web sitesinin geri kalanına olumsuz bir etkisi yoktur. Pazarlamacılar, bu tür raporları gördüklerinde panik yapmamalı ve bu durumun normal olduğunu bilmelidir.
Bu makale, pazarlamacıların SEO stratejilerini optimize etmelerine ve Google’ın dizine ekleme süreçlerini daha iyi anlamalarına yardımcı olabilir. Bu bilgiler, web sitelerinin arama motorlarında daha iyi performans göstermesini sağlamak için kullanılabilir.
Kaynak: https://www.searchenginejournal.com/why-google-indexes-blocked-web-pages/526257/
