User-Agent: *
Disallow: /

Bunu robots.txt in içine yazman hiçbir arama motoru sitemi indexlemesin anlamına gelir zaten. robots.txt i indexlenmesini istemediğin bi yer varsa kullan yoksa sil