Biz zamanında kaldırmak için header'a no İndex ekledik.
Ayrıca robot sayfanızdan da eklenen sayfaları, imaj klasörleri vs disallow yapın