Sitenizde No-Index meta tag bulunuyor olabilir Robots.txt üzerinden Disallow parametresi kullanılmış olabilir siteniz çok geç açılıyor olabilir bu nedenle crawler timeout olabilir ve en kötüsü siteniz açılmıyor olabilir.
robots.txt dosyamda disallow parametresi var ama kaldırıp sunucuya attığım zaman güncellenmiyor sebebi ne olabilir