kaydırma yapmışsın hocam
1-Bütün robotların, site üzerindeki bütün dosyaları tarayabileceğine izin veren örnek; " * " yıldız işareti istisnasız tüm robotları indeksleme yapabileceğini gösterir.

User-agent: *
Disallow:


2-Bütün robotların, site üzerindeki hiçbir dosyayı taramamasının istendiği örnek;

User-agent: *
Disallow: /


3-Bütün robotlar, site üzerindeki aşağıdaki 4 klasörün içeriğini indekslememeli;

User-agent: *
Disallow: /cgi-bin/
Disallow: /images/
Disallow: /tmp/
Disallow: /private/

yazanlar bunlar, ilk mesajdada belirttiğim gibi sizin kullandığınız robots.txt içeriğine göre

son sorunuzun cevabıda evet

belirlediğiniz 3 bot dışında indexleme demişsiniz, ilk mesajda son kısımda yazdığım gibi düzenleyebilir o robots.txtyi kullanabilirsiniz, kolay gelsin..