htaccess için bkz SetEnvIfNoCase User-Agent
robots.txt saygımız var deselerde umursamazlar. ip bulup engellemek en garantisi.