İndexlenmesini istemediği yerleri yasaklamış.Botun her yere girmesi,indexlemesi sakıncalıdır.

mrks adlı üyeden alıntı: mesajı görüntüle
Kardeş sen yasaklamışsın botu siteme uğrama demişsin..

Yukarıdakileri sil ve Hemen şu şekilde değiştir.


User-Agent: *
Disallow: