URL kaldıra ana sayfanın ismini yaz, hepsini uçuruyor. Ben bir kez yapmıştım.
Onun dışında robot.txt'den de aşağıdaki kod vasıtası ile silebilirsin.

Tüm Siteyi Silmek için
User-agent: *
Disallow: /