Yeri gelmişken sormak istiyorum...
Sitemde diyelimki yüzlerce şu şekilde link var...
siteadi.com/video-ayyildiz.html
siteadi.com/video-r10.html
siteadi.com/video-sanane.html
siteadi.com/video-banane.html
şeklinde linklerden yüzlerce var..
ben bunları nasıl engelleyebilirim. Meselea
siteadi.com/video- şeklinde başlayan tüm linkleri engellemek istiyorum. Fikriniz?
Makalenin içerisindede bulunuyor aslında ama, ben sorunun cevabını vereyim.
video ile başlayan tüm dosyalarını engellemek istersen kullanman gereken kod:
Disallow: /video*.html/
yukardaki gibidir. Uzantıları ne ise ona göre değiştir ben örnek vermek için html kullandım.