semrush botları sitenize giremiyor olabilir mi? semrush botlarının ip adresini whitelist'e eklemeyi denediniz mi?
Htaccess'a
<IfModule mod_rewrite.c>
RewriteEngine On
RewriteCond %{HTTP_USER_AGENT} semrushbot [NC]
RewriteRule .* - [L]
</IfModule> kodunu ekledim bakalım değişiklik olacak mı