hayır robots.txtle yapmanızı önermem..
bende de öyle olmuştu..
googlede indexlerim gidiyordu..
sildim sitemapı..
düzeldi..