Robots.txt de aynı sorun olduğu söylenen bir wp sitede sorun yok iken diğerinde olabiliyor. Bu sebeple sordum. Neyin bilincinde olup olmadığımı sorgulamak yerine cvp verip aydınlatsaydınız da teşekkür etseydik.

Örneğin ;

User-agent: *
Disallow: /trackback/
Disallow: /wp-admin/
Disallow: /archives/
Disallow: /*.php$
Disallow: */feed/
Disallow: */trackback/

Sitemap: http://siteadi/sitemap.xml

sorunsalı ile,

User-agent: *
Disallow: /wp-admin/
Disallow: /archives/

User-agent: Googlebot
Allow: /.js$*
Allow: /.css$*

User-agent: Googlebot-Image
Allow: /wp-content/uploads/
Allow: /images/

Sitemap: http://siteadi/sitemap.xml sorunsalında da konu sahibi arkadaşın bahsettiği sorunlar mevcut. Bu durumda bilincinde olduğunuzu düşündüğünüz konuyu paylaşırsanız bizde bilinçleniriz..