robots.txt bir plugin oluşturuyor gördüğüm kadarıyla..sorun yok gibi..böyle devam edin..yok illa ben robots.txt yapıcam derseniz sektöre göre değişen birşey değildir..
User-agent: *
Disallow:
bu bile yeterli..public_html içinde yoksa robots.txt dosyası oluşturup atın..not defteri ile..dediğim gibi sorun yok gibi şu an..google bot robots.txt doğru okuyorsa yeterli..