public_html'ye at daha sonra siten.com/robots.txt yazdığında gözükür.