Webmaster Tools Google Gibi Getir ve Robots.txt Hatası

Arkadaşlar 3 yaşındaki websitemin bugün robots.txt'yi güncellemek için webmastertools'a girdim. Ancak Robots.txt yi güncellerken böyle bir sorun yaşıyorum. Aynı şekilde google gibi getir yapmayı denedim onda da böyle bir sorun yaşıyorum. Sebebi nedir acaba yardımcı olacak arkadaşlar bakabilirler mi?

robot dosyanızı paylaşırmısınız ona bakalım

peki sitende önbellek varsa ve sen önbelliği botların önbelleğe gelmesini kapatmışsan şimdi siten zaten botlarada önbellek gösteriliyor. o yüzden sitenin önbelleğini açmak zorundasın diye düşünüyorum. sonuçta önbelleği botlara gözükecek. direk sitenin önbelleksiz haline bot gelmez ki. bence orda disallow önbelleği kaldır tekrar dene. büyük ihtimal sorun çözülecektir

şuanda dediğinizi yapıyorum ftp den ancak url de yaptığım değişiklik nedendir görünmüyor ve en eski haline gidiyor. 2-3 saat önce sunucu daki arkadaştan destek aldım birşeyler yaptı yaptığım değişikliği gördüm ancak şimdi yine yaptığım değişikliği göremiyorum. Root ile bağlandım, dosya yöneticisinde yaptığım değişiklik görünüyor ancak url de göremiyorum.

baktığımda siten wordpress değil. şimdi wordpreste şöyle bir şey var cache eklentileri siteyi cacheye aldıklarında bazen bazı cacheler yüzünden ayarlar aktif olmuyor. önbelleği silmen gerek. kısacası senin önbellek sisteminde önbelleği bir şekilde temizleyip ayarları yeniden deneyin büyük ihtimal sizin eklediğiniz ayarlar olacaktır.