
Peki hangisi daha mantıklı? Hiç ellemeden kalmaları mı yoksa robots.txt mi?
O domain ile hiç ciddi işe girmemek en mantıklısıdır.

Sana başıma gelen olayı anlatayım;
Bir tane internet sitem vardı, senin gibi 404 hataları ile doluydu. Verdiğim yöntem ile engelledim tüm hataları. Site hitlenmeye başladı ve 20k oldu. Daha sonra sunucu değiştirmek zorunda kaldım, sunucuyu bir yerden bir yere taşırken robots.txt dosyasını değiştirmeyi unutmuşum. 404 hataları yine gözüktü ve google tam spam cezası olarak cezalandırdı.