Bota izin veriliyor ama legal ve sunucu kaynaklarını aşırı tüketmeyen botlara izin verilir. Sizin botunuz demekki problem çıkarıyor. Açacaklarını sanmıyorum.
Durum şu ki ben o siteyi taşıdığım ilk andan beri bot çalışmıyor. botun htcaccess dosyasında düzenleme yapılması gerekiyor sanıyorum. htcaccess dosyasını kaldırınca botun anasayfasını görüntüleyebiliyorum.
şimdilik herhangi bir sınırlama getirildiğini düşünmüyorum.