Robot.txt ile .htaccess bakın .