hocam o yüzden site adresinizi verin demiştim
yani yanlış bir şey yapmayalım diye. mevcut robots.txt dosyanızı buraya yazarsanız gerekli satırları daha sağlıklı çalışacak şekilde verebilirim.
Şuan siteadi.com/robots.txt yazdığımda bulunamadı hatası veriyor. Sanırım robots.txt mevcut değil şuan.