robots.txt ile yapabilirsiniz.