webmaster tools üzerinde anında önizleme yaparak ve alt sayfaları dizine göndererek deneyin derim robots.txt'nin içerisini kopyalarsanız bir göz atalım ki ona göre yönerge gösterelim yalan yanlış yönlendirmeye gerek yok.