benzer durumu yaşadım robots.txt düzenleme yaptıktan sonra yaklaşık 3-4 ay sonra yavaş yavaş silinmeye başlıyor tamamı ne zaman silinir net bir şey söyleyemem belki 1 yıldan uzun sürer. süreç içinde bazı url ler robot tarafından engellendiği halde dizine eklendi uyarısı da verebilir