Sitemi Semrush, Ahrefs Gibi Araçlardan Analizini nasıl kapatabilirim? BİLİN KİŞİ YOKMU???

ihtiyaç giderildi.

Semrush, Similarweb ve Ahrefs gibi sitelerin botlarının IP adreslerini tespit ederek engelleyebilirsiniz. Cloudflare bu konuda size yardımcı olabilir, Google'da Semrush's bot ip address gibi aramalar yaparak belki bu sitelerin botlarının user-agentlerini elde edebilirsiniz.

https://www.semrush.com/kb/1149-issu...wling-a-domain

daha önce böyle bişey yaptınız mı?

Daha önce böyle bişey yapmaya gerek duymadım.

bunu


User-agent: SemrushBot
Disallow: /

User-agent: AhrefsBot
Disallow: /

User-agent: *
Disallow: /admin/
Disallow: /login/
Disallow: /private/

ve olmaz ise
<IfModule mod_rewrite.c>
RewriteEngine On
RewriteCond %{HTTP_USER_AGENT} SemrushBot [NC,OR]
RewriteCond %{HTTP_USER_AGENT} AhrefsBot [NC]
RewriteRule .* - [F,L]
</IfModule>

bi deneyin bakalım

ikiside olmadı

aşadakini bi denermisin




SetEnvIfNoCase User-Agent "SemrushBot" bad_bot
SetEnvIfNoCase User-Agent "AhrefsBot" bad_bot

<FilesMatch "(.*)">
Order Allow,Deny
Allow from all
Deny from env=bad_bot
</FilesMatch>

yine analiz ediyor semrush ahrefs

birden fazla bot olduğu için hangisini engelleyeceksin ona bakmak lazım bir çok ip adresi var diye araştırdım, sürekli yenileniyor. Bulursam başka yolunu paylaşırım