Bir süre önce link yapısında değişiklik yaptım. Şu an 404 sayfasına yönlenen ve bulunamayan aşağı yukarı 4000 adet link var. Bu linkleri Google Web Master Tools kullanarak Google aramalarından tek tek elle kaldırmayı denemekten başka bir çarem olmasını umud ediyorum.
Var mıdır bu işin bir kolayı şu 4000 i birden kaldırayım?
Bulunamayın linkleri robots.txt dosyasına disallow olarak eklerseniz. kaldırabilirsiniz. Ali ata bak dizinine google bot okumuyacaktır ve indexten düşücektir.
Örnek :
User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /ali-ata-bak/