botların ne amaçla geldiğini bilmiyorum ama günde 100 bin sayfa gezinti yapıyorlar. hem bantvith yiyorlar hemde serveri kastırıyor. bana google botundan başkasının sanırım faydası yok. iptal etmek istiyorum. robots.txt ye liste oluşturdum fakat işe yaramadı.