Bende de aynı sorun var bakalım bir kez daha denedim. Belki şimdi olur. Google app Türkçe'ye geçince böyle hatalar vermeye başladı. Eskiden robots.txt zorunlu değildi.