Onun onune gecebılırmsıısn bilmiyorum belki alexa vs gibi botları direk htaccesle engellersin.
Örnek :
https://stackoverflow.com/questions/...-with-htaccess

RewriteEngine On RewriteCond %{HTTP_USER_AGENT} ^(.*)googlebot(.*)$ [NC,OR] RewriteCond %{HTTP_USER_AGENT} ^(.*)bingbot(.*)$ [NC,OR] RewriteCond %{HTTP_USER_AGENT} ^(.*)alexa(.*)$ [NC] RewriteRule .* - [F,L]