Ahrefs Botunu Yasaklayan Var Mı?

robots.txt ye ekleyin:

User-agent: AhrefsBot
Disallow: /

Eklerim hocam da, siz engellediniz mi botları?
Bu arada konudışı olacak ama ne güzel grafik çalışmalarınız var valla çok beğendim, elinize emeğinize sağlık.

Ben önceden bununla engelliyordum, benzer şekilde semrushı da engelleyebilirsiniz, tabi siteniz için SEO araçlarını kullanıyorsanız bunu öneremem, genelde rakip siteler sizin siteyi A'dan Z'ye tarar, link yapılarınızı kontrol eder hatalarınızı bulur, kendisi bu hataları bildiği için kendi sitesinde bu hataları uygulamaz.

Ayrıca güzel görüşleriniz için çok teşekkür ederim hocam, tasarımda bence hala yeteri kadar iyi değilim gibime geliyor, öyle kendimi geliştirme evresinde devam ediyorum.

Hocam ben robots'a baktım engellemişim zaten? Ama hâlen görünüyor botlar, çok tuhaf.


Bu arada devamlı kendinizi geliştirmeniz muhteşem bir özellik.

Sanırım siz konuya gelen cevapları görmesini engellemişsiniz, belirli bir dizin engelli görünüyor, genel olarak engelli değil gibi hocam, ayrı ayrı da ekleyebilirsiniz bir kontrol edin derim

Hocam işin absürt yanı konuyada giriyor bunlar, sanırım hiçbir şeyi engelleyememişim. Biraz araştırdım da bu botlar siteyi bayağı yoruyorlarmış.

bir kaç yöntem daha var onları da paylaşayım sonra siz araştırmanızı buna göre derinleştirin hocam

ilk olarak httaccesse bu tarz bir yapı ekleyebilirsiniz, bunu önceeden kullanmışım, bir araştırın hala geçerli mi bilmiyorum

<IfModule mod_rewrite.c>
RewriteEngine On
RewriteCond %{HTTP_USER_AGENT} AhrefsBot [NC,OR]
RewriteCond %{HTTP_USER_AGENT} SEMrushBot [NC]
RewriteRule .* - [F,L]
</IfModule>

ayrı olarak cloudflare kurun sitenize, oradan da bazı ayarlar vardı diye hatırlıyorum