robots.txt dosyasını manuel bir şekilde oluşturup Google Webmasters Tools üzerinden yeniden değerlendirme isteği göndermeyi denediniz mi?