Merhaba,
şimdi google search console dan baktığımda dizin raporlarında bulunan tarandı eklenmedi, kopya vs bölümlerinde benim sitemde bulunmayan saçma saçma yerleri botların taramaya kalkıştığını gördüm.
örnek verecek olursam
https:/www.ornek.com/haber/adanada--yuksek%gerilim.html
yada
https:/www.ornek.com/haber/adanada--yuksek%gerilim.html?do=kullanici&to=125
gibi sayfalar indexlemiş.
Sitede içerisinde iki yane yan yana ayırıcı çizgi ( -- ) geçen link yok yada yüzde işareti geçen ( % ) geçen bir link yapım yok. aynı şekilde url içerisinde html den sonra eklenmiş içinde soru işareti ( ? ) geçen bir link yapım yok indexlenmesini istediğim.
bunları engellemek adına robots.txt ye aşağıdakileri eklesem doğru olur mu ?
Disallow: /*?
Disallow: /*--
Disallow: /*%
bilgisi olan varmı bu konu hakkında.
Robots.txt ile ilgili bir soru
0
●88