Arkadaşlar merhaba,
Yakın zamanda bir domain kaydettim domainde eskiden otomatik etiket oluşturan sistem kullanılmış sanıyorum google tarama hatalarında sürekli aşağıdaki gibi hata sayfaları çıkıyor.
Bu etiket değişkenini robots.txt ile engellemenin bir yolu varmı örneğin başı etiketler olan url leri engelleyebilirmiyim.
Ayrıca ben suan sıtemde
www.domain.com/etiket/icerik.htm kullanıyorum robots txt ile aşağıdaki düzeni engellesem şuanki etiketlerimde engellenirmi?
Yardımcı olursanız çok sevinirim. Teşekkürler.
http://www.domain.com/etiketler-123.html http://www.domain.com/etiketler-154.html http://www.domain.com/etiketler-187.html http://www.domain.com/etiketler-154.html http://www.domain.com/etiketler-112.html http://www.domain.com/etiketler-097.html