robot txt yi aşşağıdaki gibi ayarlamanın ekstra bir faydası olurmu acaba yoksa all in seo nun oluşturduğuda yeterlimidir
Alıntı
User-agent: *
Disallow: /cdn/
Allow: /
User-agent: Mediapartners-Google
Allow: /
User-agent: Adsbot-Google
Allow: /
User-agent: Googlebot
Disallow: /cdn/
Allow: /
User-agent: Googlebot-Mobile
Allow: /
User-agent: Googlebot-Image
Allow: /
Allow: /wp-content/uploads/
User-agent: Twitterbot
Allow: /
Allow: /wp-content/uploads/
User-agent: facebookexternalhit
Allow: /
Allow: /wp-content/uploads/
Sitemap:
http://siteadresi.com/sitemap.xml