robots.txt de şöyle bir şey var ama

Sitemap: http://www.siteadresi.com/sitemap2.xml
robots.txt de bunu boyle yazarak botların görmesini sağlayabilirsin bence..