https://www.google.com/webmasters/tools/robots-testing-tool
Adresinden güncelleme ve kontrol yapabilirsiniz.