Merhaba arkadaşlar konulardan ve mesajlardan anladığım kadarıyla google herkese robots.txt ile bağlantılı bir mail atmış ya da uyarı vermiş . Aynı uyarı alanlardan biri olarakda wordpress site sahiplerinin robots.txt dosyalarında güncelleme yapmaları gerektiğini düşünüyorum ve kendimde yaptım . Google bu olayı tahminimce 2 neden yaptı 1- site sahipleri siteleriyle ilgili mi uyarıları dikkate alıyor mu 2- css ve js uzantılı dosyaları kontrol etmek .

Benim robots.txt im şu şekilde arkadaşlar

User-agent: *
Disallow: /wp-admin/ --> Burada Admin dosyalarını erişime kapattık . 
Disallow: /wp-includes/ ---> Burada ise sitemizi için gerekli ayarların olduğu klasörü kapattık .
Allow: /wp-includes/*.js  --> Burada gerekli ayarlar her ne kadar kapalı olsada içlerinde .js uzantılı dosyaların engelini kaldırdık . 
Allow: /wp-includes/*.css --> Burada da .css uzantılı dosyaların engelini kaldırdık.
Sitemap: http://www.sanalfaresi.com/sitemap.xml

NOT : "-->"ile birlikte açıklama kısımlarını silerek atınız .

KAYNAKLAR :

http://stackoverflow.com/questions/31691662/allowing-javascript-and-css-files-to-be-crawled/31691738?sgp=2#31691738

http://www.sanalfaresi.com/wordpress...obots-txt-2015