Ya teknik bir problemdir yada robots.txt dosyanız cache'de kalmıştır.
Doğru şekilde robots.txt dosyanızı doğru şekilde yapılandırın, 24 saat sonra tekrar deneyin.