Evet olabilir. Agresif botların websitenizin kaynaklarını yoğun şekilde tüketmesini istemiyorsanız Crawl Delay komutuna Robots.txt dosyanızda yer verebilirsiniz.
bknz.
Robots.txt dosyasına tam olarak hangi kodu yazıcaz örnek verirmisiniz.
Pinterest botlarını engellemen hitini düşürür diye biliyorum