Merhaba arkadaşlar,
Bir türlü sorunsuz bir şekilde robots.txt yi googlewebmastertoolsa beğendiremedim ve bu yüzden resimler için oluşturduğum site haritasında google webmastertools site haritalarında engellenen uzantılar olduğunu görüyorum.
Kullandığım robots.txt aşağıda ve aldığım hata onun bi aşağısında, bakıp yardımcı olursanız sevinirim. Hangi disallowları kaldırmam gerek googlebot image e izin verdim oysa ki
Sitemap: [url]http://w[/url] w w .x x x .com/sitemap.xml
sitemap: [url]http://w[/url] w w.x x x.c o m/sitemap-image.xml
User-agent: *
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-content/
Disallow: /wp-includes/
Disallow: /recommended/
Disallow: /comments/feed/
Disallow: /trackback/
Disallow: /index.php
Disallow: /xmlrpc.php
Disallow: /wp-content/plugins/
User-agent: NinjaBot
Allow: /
User-agent: Mediapartners-Google*
Allow: /
User-agent: Googlebot-Image
Allow: /wp-content/uploads/
User-agent: Adsbot-Google
Allow: /
User-agent: Googlebot-Mobile
Allow: /