Önce teşekkür ederim bot için.
Başka arkadaşların başına gelebilir diye çözümümü paylaşayım istedim. Pluginlerden Anti-Adblock ile BadBehavior antispam eklentisini etkisizleştirince, bot çalışmaya başladı. Fakat bu seferde sayfaları getir diyince alt alta sıralanmış, kendi sitemin 404 vermiş görüntüleri çıkıyor sadece

http://fotolink.cz.cc/images/74492364848986065325.png

Bununda çözümünü buldum. İki klasörün birlikte atılması lazım ana dizine. Sadece yabanci dizi klasörünü eklemiştim, sorun ondanmış