sayfa erişim süresi uzadıkça botların sitede dolaşması problemli olabilir.

fakat günümüzde tüm botlar yurt dışından erişim yaptıgı için bir problem olacagını sanmıyorum.

150- 200 ms arasında facebook twit gibi siteleri baz alabilirsiniz.