Ahrefs Gibi Yerlerden Linklerimi Görmesinler.
10
●575
- 09-03-2020, 01:42:32Üyeliği durduruldumerhaba arkadaşlar, aldığım linklerin ahrefs,semrush gibi araçlar da gözükmemesini istiyorum. İnternetten araştırdığım kadarıyla robotxtxt de engellememin yeterli olduğunu söylüyor. Ahrefs gibi seo araçlarının aldığım linkleri görmemesi için yeterli mi acaba ? yoksa link aldığım site de aynı şekilde ahrefs botlarını engellemeli ? Zaman ayırıp cevap yazacak herkese şimdiden teşekkür ederim.
- 09-03-2020, 02:00:51Kimlik doğrulama veya yönetimden onay bekliyor.Mesela abc.com sitesinden link aldınız. Ahrefs vb. botlar abc.com'u tarar ve buradan yapılan link çıkışlarını görüp veritabanlarına kayıt ederler. Bu sebepten dolayı linkin bulunduğu siteden Ahrefsbotu engellenmeli. Kendi sitenizde ahrefsbotunu engellemeniz bu konuda çözüm olmayacaktır, karşı tarafın engellemesi gerekir.
Kendi sitenizden ahrefs botunu engellerseniz şu şekilde olur;
siz diyelim ki abc.com 'a bir backlink çıkışı yaptınız. Ahrefsten abc.com kontrol edildiği zaman sizin siteniz listelenmeyecektir. - 09-03-2020, 02:02:26Ne kadarda engellemeye çalışsanız da ne yazık ki şöyle bir durum var Google Bot imitasyonları ile crawler ediliyor internet bağlantıları. Robot.txt dosyasından ahrefs, semrush ve özellikle moz çok agresif ancak engellemek için IP aralıklarını tespit edip engelleyebilirsiniz.WebciAdam adlı üyeden alıntı: mesajı görüntüle
- 09-03-2020, 02:03:48Tabi ahrefs kendi ipsi üzerinden botları gönderiyorsaVindicta adlı üyeden alıntı: mesajı görüntüle
- 09-03-2020, 03:54:54doğru olabilir , tecrübem yok ama şu dökümanda tam olarak engellemek istersek robots.txt kullanın demişler.phpxtr adlı üyeden alıntı: mesajı görüntüle
https://help.ahrefs.com/en/articles/...ling-behaviour
ancak deneyerek sonuca ulaşabiliriz.
hatta : https://ahrefs.com/tr/robot şu kısımda, "robots.txt'e saygı duyarız demişler."
https://prnt.sc/rdj1dl - 09-03-2020, 04:04:17User-agent: Ahrefsbot
Disallow:/
User-agent:Semrush-bot , semrushbot
Disallow:/
Bugüne kadar veritabanına işlenmiş linkleri engelleyemezsiniz yalnız. Semrush ve Moz da bot yapıları biraz daha değişik ve çok sayıda onların tamamı için ufak bir araştırma yapabilirsiniz ama genel format bu şekilde. Tabi sadece moz, ahrefs ve semrush ile bitmez şuanda çok sayıda bot var bunlara alternatif biraz meşankatli bir iş.
