Merhaba okudugum makale isinize yarayabilir.Detaylarınada asağıdaki linkten ulasabilirsiniz.Sitenizdeki robots.txt dosyasına ekleyeceğiniz basit birkaç komut ile, Googlebotun erişimini sağlamanız mümkün:
User-Agent: Googlebot
Allow: .js
Allow: .css
Bu komutlar, sitenizdeki Js ve CSS dosyalarına erişim sağlamakta. Ancak klasör bazında erişim için komutları çoğaltmanız gerekebilir. Örneğin belli bir dizindeki veriye erişim sağlamak istemiyorsunuz ancak o dizindeki Js ve CSS dosyalarına erişim vermek istiyorsunuz; o zaman dizini engelleyip dizindeki Js ve CSS dosyalarına erişimi ayrıca vermeniz gerekir. Eğer aşağıdaki kodu kullanırsanız dizine erişimi tümden engellersiniz;
User-Agent: Googlebot
Disallow: /dizin/
Allow: .js
Allow: .css
Söz konusu dizine erişimi kapatıp bu dizinde bulunan Js ve CSS dosyalarına erişim sağlamak için aşağıdaki kodu kullanmanız gerekir:
User-Agent: Googlebot
Disallow: /dizin/
Allow: /dizin/*.js
Allow: /dizin/*.css
Böylece Googlebot seçtiğiniz dizindeki içeriği taramayacak ancak dizin içindeki Js ve CSS dosyalarını tarayabilecektir. Böylece Google Search Consoledan aldığınız uyarı mesajındaki sorunu gidermiş olursunuz.
http://www.stradiji.com/google-css-v...risimine-acin/