Bazı web sitelerin search konsollarında binlerce url görüyoruz google bir şekilde bunları görüyor ve ulaşılamaz durumda.
Örnek vereceğim. Web sitenizin url'leri .html ile bitiyordu ve asp ile bitiyordu. Siz normal yapıya geçtiniz ve artık bunlar yok. Haliyle 5000 tane .html linkiniz 404 hatası veriyor.
Bunu düzeltmek için ne yaparsınız.
1. Robots.txt üzerine engelleme girerek sonu html ve içinde html geçen tüm linklerin dizine eklenmesini engellersiniz
2. Veya google'ın bu sayfaları ziyaret etmesine izin verirsiniz ancak sayfa kaynak kodlarında nofollow etiketi eklersiniz
Siz neler yapıyorsunuz
Örnek uyguladığımız senaryo