robots.txt ile etiket sayfalarını engellemek, yaptığım doğuru mu acaba?

12-03-2013, 23:56:30

Merhaba arkadaşlar, google az sonuç veren etiketlerin bol bulunduğu sitelere bildiğiniz üzere kalitesiz site damgasını basmakta.

Reboot.txt dosyası ile etiket url lerini engellemeye çalıştım, reboot dosyam şu şekilde, acaba doğru mu yaptım ?

User-agent: *
Disallow: 
Disallow: http://www.site.com/etiketler/*

wp kullanıyorum ve etiket ön eki belli zaten.

13-03-2013, 00:54:28

#2

eskiji

Alıntı

User-agent: *
Disallow: http://www.site.com/etiketler/

Şeklinde olmalı.

13-03-2013, 00:57:32

#3

XeroX_

eskiji adlı üyeden alıntı: mesajı görüntüle

Şeklinde olmalı.

Aslında kısmende olsa soruma cvp buldum, * olmak zorunda diye düşünüyorum çünkü engellemek istediğim sayfa /etiket/ değilde /etiket/* değişken sayfalar.

Ek bilgi olarak google haricindeki diğer arama motorlarının sitenizi daha iyi indexlemesi için reboot.txt dosyasına sitemap eklemek de iyi oluyormuş ki bence de öyle olsa gerek.
Örnek reboot dosyası ;

User-agent: *
Disallow: 
Disallow: /izle/*
Sitemap: /post-sitemap1.xml