Robots.txtden Engellenen sayfaların akibiyeti?

merhaba arkadaşlar mantiken tahmin ettigim şeyleri sizede sormak istedim tecrübelerinize dayanarak şimdi atiyorum 50k indexiniz var çogu etkilet vs bunlara no follow çektiniz yarısına belki daha fazlasına eski indexlerin googleden gitme ve sitenin temize çıkma süresini merak ediyorum ayrica webmaster tools taramada hata verirmi sayfalar giderken sizce ne diyorsunuz

Deneyimlerim sonucunda sizlere cevap vermek isterim. 50 k index olabilir ama bu 50k indexte etiketlerden olumuşsa kaliteli içerik yoksa tam spam yeme olasılığı yüksektir. Nofollow link etiketidir bu kısımda indekslemeyi engelleme noindex meta tagından bahsediyorsunuz heralde yaparsanız bir süre sonra robots.txt tarama yaptıkça indexler düşecektir. Bu süreç taranma hızına göre değişir.

İkinci olarak bunlar kalkınca oluşacak tarama hatalardan kastınız bu tarama hataları belki biraz performansı düşürebilir onları temizlerseniz çok daha iyi verim alacağınıza inanıyorum. Tarama hataları ön bellekte kalınmış kalıntılar. Arama motoru botları tarama yapar ve o içeriğe ulaşamayınca hata verir ve bu hatalar temizlenmedikçe sıkıntılar olabilir.

no index follow tagını kullanırsanız index hızınıza göre botlar sitenizi taradıkça bu indexleri kaldırır ortalama oturması 2 ay kadar sürebiliyor sizin index sayınız fazla oldugu içi bu süre uzayabilir.

teşekkürler tahmin ettigim yönde olmuş tecrübeleriniz evet no follow degil no index orda el alışkanlıgı olmuş backlinkden dolayı tarama hataları demişken hata verirmi bu sayfalar mantiken userler giriş yapabilir sayfaya no index süresinde sadece tekrardan indexlemez herhalde eski indexi kaldırırmı acep ? hiç yapmadım bu işlemi sanırım eski index öylece kalır gibime geliyor veya etıketler yada tarama hatası vermeden 1 kaç ayda index gider mi acep

Botlar gezindikçe algılama oldukça eski indexlerde silmektedir. Aşırı index yoksa url kaldırma aracı ile indexleri kaldırman münkündür.

indexleri kaldırmak mümkün aslında iyide olur gibi geliyor fakat bu kaldırdıgımız indexleri resmen wmtoolsdan banlıyoruz yarın bi gün geri getirmek istesek gelecegi malum mudur? 3 ay içerisinde tarama hataları kendini götürüyor zaten ne düşünüyorsunuz bu konuda

İzin verdiğin zaman geri gelmektedir. Tarama hataları Günde 1000 tane temizlemek münkün bu süreçte temizlenebilecek miktarsa sorun yok diyelim
3 Ayda 90.000 tane günlük tarama hatası temizlendiğini düşünürsek bu miktarın altındaysa temizlene bilir. Tarama hataları sitenin gerilemesini ve ilerleyememesine sebep olur ön bellekete kalır.