robost.txt dosyasını aşağıdaki gibi güncelleyebilirsiniz.
Bununla beraber .htaccess dosyanıza Options -Indexes kodunu eklemeniz durumunda alt klasöre erişim engellenecektir.
Hocam bu şekilde google botları engellemez değil mi?
Bir de opt. indexes kodunu yazabilir misiniz?