Engelleme olayı, check edecek sitenin botunu engellemek ile oluyor.

örnek:

https://ahrefs.com/robot

BrowserMatchNoCase AhrefsBot bad_bot
Order Deny,Allow
Deny from env=bad_bot

gibi. Zaten biraz araştırırsanız detaylı bilgi veren yüzlerce site vardır.

örnek: http://www.blackhatworld.com/seo/nee...ahrefs.651597/