sitemap plugini kuruluysa zaten o bunu yapıyor en iyi şekilde.ana dizine robots.txt at CHMOD 777 yap sonra ayarları kurcala.en sonda CHMOD 644 yapabilirsin.