Disallow olarak mı gönderdiler Allow olarak mı?

Disallow komutu Google botlarını siteye almaz diye biliyorum ben?