Konuyu açan arkadaş ile aynı sorunu Yaşıyorum
robots.txt dosyasını şu şekilde yaptım, bir surun varmı acaba?

user-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /cgi-bin/
Disallow: /404.php
Allow: / Sitemap: http://
www.siteadi.net/sitemap.xml