Crawl Sürelerinde Artış Problemi
Son zamanlarda bazı CDN’ler (içerik dağıtım ağları) üzerinde barındırılan sitelerin sunucu yanıt sürelerinde önemli bir artış görüldü. Bu sitelerde, toplam crawl talepleri ise düştü. Yani, teknik olarak arama motoru taraması azalmışken, Google’ın daha az sayıda sayfayı taraması artık çok daha uzun sürüyor. Bu durumun bu ayın başında başladığı ve bazı kullanıcılar için hâlâ devam ettiği belirtiliyor.
Yeni Kullanıcı Kaybı ve IP Aralıkları
Bu durumu fark eden Gianna Brachetti-Truskawa, LinkedIn ve Bluesky üzerinde konuyla ilgili daha fazla bilgi paylaştı. Kendisi şöyle yazdı:
Son zamanlarda yeni kullanıcı sayınızda bir düşüş gördünüz mü veya Google’ın crawl hızının düştüğünü mi fark ettiniz? Google, 04.02.2025 itibarıyla tarama için kullandığı IP adresleri listesine güncelleme yaptı. Eğer siteniz bir CDN üzerinden sunuluyorsa, sitenizi DDoS saldırılarından koruyan WAF (Web Uygulama Güvenlik Duvarı) Googlebot’un rate limiting ile karşılaşmasına veya engellenmesine neden olmuş olabilir. Bu güncellemeler için IP aralıklarını güncellemeleri gerekebilir.
Bu durum her CDN’den etkilenmedi; örneğin CloudFlare durumu başarıyla yönetti. Ancak, Akamai Technologies gibi bazı büyük CDN’lerin bu problemi yaşadığı bildirildi. Gianna, “Neyse ki, Cloudflare konuyu iyi yönetmiş! Fakat diğer bazı CDN’ler IP aralıklarını güncellemiyor gibi görünüyor,” şeklinde ifade etti.
Google’dan Açıklama ve Çözüm Önerileri
Google’dan John Mueller, bu konudaki endişelere cevap vererek, IP değişikliklerinin takip edilebileceği bir JSON dosyası bulunduğunu belirtti ve gelecekte durumu normale döneceğini umduğunu söyledi. Mueller, “Değişiklik meydana geldiğinde IP json dosyaları otomatik olarak güncelleniyor,” dedi.
Geçmişte yaşanan bu tür değişiklikler, genellikle küçük çaplı oldu ve dosya içeriği üzerinde büyük etkileri olmadı. Ancak değişimler her zaman önemli olabilir.
Gianna Brachetti-Truskawa, bu durumdan etkilenenler için bazı ipuçları paylaştı:
- CDN sağlayıcınızla iletişime geçin ve Googlebot için IP aralıklarının güncellenip güncellenmediğini kontrol edin. Eğer güncellenmemişse, bu değişikliklere ayak uydurabilen bir sağlayıcıya geçmeyi düşünün.
- Kendiniz bu değişiklikleri izlemeyi veya dosyanın eski sürümlerini Wayback Machine‘de bulmayı deneyin. Dosyanın anlık görüntülerini burada saklayabilir ve karşılaştırmalar yapabilirsiniz.
- Yorumlarda daha fazla CDN tavsiyesi bulabilirsiniz.
Bu değişikliklerle ilgili daha fazla bilgilendirme ister misiniz? Sizin için faydalı olur mu?
Daha fazla bilgi için LinkedIn ve Bluesky üzerindeki forum tartışmasına katılabilirsiniz.
Güncelleme: Şu anda WebmasterWorld forumunda benzer bir sorunla ilgili şikayetler de mevcut. İşte oradan bir grafik:
