Google'ın kendi robots.txt'sinde engellemesinden kaynaklanıyor bu. google gibi getirdikten sonra robotx.txt nin üzerine tıklayıp adres barına baktığınızda google'un sayfasında olduğunuzu görebilirsiniz. Enteresandır bir çok kişi de çözüm sunmaya çalışmış... Çok hoş bir davranış tabi, o da ayrı bir konu.