Uzun lafın kısası, tüm SEO botlarını yasakladım ve site haritama eriştiklerinde, sadece çok sınırlı bir sayfa listesi alıyorlar.

Dinamik içerik (hava durumu) içeren 60 bin sayfalık bir web sitem var. Web sitemi taramalarına izin vermek için olumlu bir argüman görmüyorum.

1 – Web sayfalarını kitlesel olarak sürünerek, ekstra kaynaklar tüketirler, para harcarlar

2 – Rakiplerinize bilgi veriyorsunuz

3 – Size kendi verilerinizi pahalı bir fiyata satıyorlar; Verilerinizi özgürce sağladığınız için ödüllendirilmezsiniz

4 – Web sitemi satmam gerekiyorsa, gelir ve kişisel veriler bu platformlarda otorite ve sıralamadan daha önemli

5 – AI döneminden beri cehennem haline geliyor (web trafiğinin% 50-60’ı daha fazla bot)

Bu resimde ne görmüyorum? Teşekkürler