robots.txt dosyanıza bakın bazen hata oradan kaynaklı olabiliyor.
Site yeniyse eğer DNS yayılmasını bekleyip birkaç saat sonra deneyebilirsiniz.