cok yararlı bir kaynak olmuş benim sitemdede 1500 tane var robot.txt ile engelledim,
peki şöyle bir kod da ilave etsek nasıl olur?
gerekli kodu yazıp eger ref değişkeni varsa yada bos degilse
<META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW"> etiketi versek nasıl olur.
bu tüm sayfaları kapsarmı mesela haber.php?id=15 sayfasına ref atmış bu sayfaya koysak haber.php deki diger id leride etkilermi?
haber.php?id=15 Bu sayfaya belirttin meta kodunu koyarsan o sayfanın indexini silersin.. yani pozitif sonuc..
Meta'yı haber.php?id=15?
ref=xxx.Com sayfasına koymalısın ki ref'li sayfayı silebilirsin. Senin dediğin gercek sayfaya koyuldugunda ref'liyide siler gercek sayfayıda siler buda istenmeyen bir durumdur.
Fakat gerek php ile gerek robots.txt uygulamaları ile
rahatca uyuyabilirisin.