Sayfa ve kategorileri düzenlerken, rel="canonical" etiketini eksik etmezseniz, böyle sorunlar yaşamazsınız.
Yoast kullananlar kaldırılana kadar Robotx dosyasına */page/* koyabilir. (Yine de rel="canonical" etiketini eksik etmemelisiniz. Zamanla botlar tarafından sorun ortadan kalkacaktır. Kolay gelsin.
canonical derken burada eksik etmeyin derken neyi kast ediyorsunuz? (canonical anlamını biliyorum), sorum; yoast'da page sayfasına nasıl canonical vericeğimiz yönünde
Peki bu kodu
Disallow: /page1/*
Disallow: /page2/*
Disallow: /page3/*
Disallow: /page4/*
Disallow: /page5/*
diye uzatsak daha sağlıklı olmazmı 50 ye kadar felan
Ne gerek varki öyle yapmaya