Sorunu tam anlamadım?
robots.txt dosyasını tamamane sildiğinizde bile site.com/robots.txt şeklinde girdiğinizde açılıyomu?
evet Ftp de robots.txt te diye hiç bişey yok
ama siteadı.com/robots.txt diye siteyi girince
robots.txt cıkıyo Cıkması bişe değil Kod da Disallow yazıyo Otomatik olarak ta google siteye giremiyo ve site indexlenemiyo