Yıllardır bu işlerin içindeyim fakat bu mereti doğru dürüst kullanmışlığım yoktur.
Sitemdeki bir linkin arama motorlarından silinmesini istiyorum. Robots.txt ile bu sayfayı indexlemesini önlesem sanırım silinir. ( Ya da başka yolunu bilen varsa paylaşabilirse memnun olurum. )Sitede robots.txt dosyası olmadığından tüm arama motorları dilediği gibi indexliyorlardı. Şu şekilde bir robots.txt dosyası oluşturdum belirttiğim sayfası indexlememesi için.
User-agent: *
Disallow:
User-Agent: *
Disallow: /izle/....html
Disallow: /izle/....html
Disallow: /izle/....html
gibi. Bunda bir hata var mıdır? Çünkü 1-2 hafta geçmesine rağmen hala google ilgili aramada siteyi geri atmadı.
Konu hakkında bilgisi olan arkadaşlar yardımcı olabilirlerse memnun olurum.
