Aynı sorun bende de var, ama robots.txt ile değil belirli koşullar karşılandığında dizine eklenecek uyarısı bende de mevcut.
Ücretli olarak yardımcı olabilecek varmı