robots.txt dogru olmuş bi problem yok butun siteyi indexler google.
Ayrıca sitemap gonderip robots.txt dosyasına sitemapın url'sinide girebilirsiniz.