Önceden böylemiydi sonradan mı değiştirip
User-agent: *
Allow: /
bu şekilde ayarladın ?
önceden robots.txt diye dosya oluşturmamıştım dğer sitelerimde yok mesela ana dizinde ama sorun yok
bu sitede nedense olmadı bende ana dizine oluşturdum robots'i aynen bunları koydum içerisine.