gibi dosyaların (.swf) indexlenmemesi için ne yapmamız gerek.
Indexlenme açısından uzantı yasaklayabilirmiyiz. Yani şu şu uzantılı dosyalar botlar tarafından incelenmesin ve Indexlenmesin diyebilirmiyiz.
Düzenleme:
Başka bir başlıkta cevap gelmişti. İhtiyacı olupta bu başlığı gören arkadaşlar yararlanabilirler. Aşağıdaki satır robots.txt dosyasına ekleniyor. .swf uzantısı isteğe göre çoğaltılabilir.
Alıntı
