eğer yasaklamak istediğiniz önemli bir sayfanız yoksa hiç robots.txt kullanmayın derim.