Robots.txt her sitede vardır, olmasa da olur. Her sitenin robots.txt dosyası aynıdır. ( Eğer özel olarak bir düzenleme yapılmadı ise ) Şuna bakarsan daha iyi anlarsın http://www.google.com.tr/search?hl=t...AZ_tr&aq=f&oq=