arkadaşlar aracaba sitelere bot mu salıyorlar? Eğer bot salıyorlarsa robots.txt den engeleyebilirmiyiz acaba ?