valla kardes robot.txt dosyasi yapmaya gerek yok anladigim bu olmadanda sitelerim indexleniyor. olsada ben yapmadim iyi bi sonuc almak için yapilmasi zorunlu bişeymi ustadlarimiza sorarım..cunku sitemizin gizli bolgeleri kimsenin gormek istemedigi yerleri linklemezsek saten bot o sayfayi indexlemesi biraz zor..