Hortlatıyorum kusuruma bakmayın. Robots.txt sayfasını o şekilde güncellemek tek başına yeterli olmuyor sanırım, günlerce o şekilde beklediği halde index düşmedi. Webmastertools'tan bahsedildiği gibi URL kaldırılınca oldu ancak anladığım kadarıyla sadece 90 gün ile sınırlı olarak kaldırılıyor, kalıcı olarak kaldırmak için noindex ve nofollow kodlarının ilgili sayfalara eklenilmesi öneriliyor ancak tüm sayfalara 1 hafta kadar önce bu kodları eklediğim halde o kodlar değilde webmastertools'tan geçici url kaldırma işlemi sadece işe yaradı. Neyi yanlış yapıyorum? Eklediğim noindex-nofollow kodu:

<meta name="robots" content="noindex, nofollow" />