Wordpress uygun robots.txt dosyası önerebiliceğiniz ?

öncelikle selamun aleykum arkdaşlar wordpress için önerebiliceginiz bir robots.txt dosyası varmı benım su anda kullandıgım şu

User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-includes/

Sitemap: http://xxx.com/sitemap.xml


bunun üstüne birşey eklemem gerekiyormu google pageleri etiketliyor bunlarıda eklesem sorun olurmu yardımlarınızı bekliyorum sitem kadın blog sitesi

Disallow: /wp-includes/
Disallow: /wp-includes/

2 tane yazmana gerek yok.
Bunun dışında sorun yok.xml sitemap eklentisi kullanıyorsun o otomatik de oluşturuyor.

User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /cgi-bin/

Disallow: /*ref=*
Disallow: /*?ref=*
Disallow: /?ref=*

Disallow: *?replytocom

Sitemap: http://www.site. com/sitemap.xml

# Google Image
User-agent: Googlebot-Image
Allow: /

# Google AdSense
User-agent: Mediapartners-Google*
Allow: /

# Google Adsbot
User-agent: Adsbot-Google
Allow: /

User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /trackback/
Disallow: /feed/
Disallow: /comments/
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /*?
Disallow: /xmlrpc.php
Allow: /wp-content/uploads/
Disallow: /page/*
Disallow: /tag/*/page
Disallow: /tag/*/page/
Disallow: /tag/*/page/*
Disallow: /tag/*/page/*/
Disallow: /category/*/page
Disallow: /category/*/page/
Disallow: /category/*/page/*
Disallow: /category/*/page/*/

Ben kategori ve etiketleride indexletmiyorum.

Nedeni nedir peki ?