.htaccess ile uğraşmak yerien robots.txt ile kısıtlamak çok daha basit.