siteadı com/robot.txt yazdıgım zaman ise direk siteye giriyor ve not found verıyor.
Bazı wordpress temalar wp > düzenleyici bu kısımda görmenize rağmen ftp bulunmamasından dolayı sorun çıkartabilir.
1 kerede Godady üzerinde bulunan sitede başıma gelmişti. Değiştirsek bile eski dosya duruyordu.
FTP bağlanarak ana dizine robots.txt dosyanızı manuel olarak atınız.