Yoast bu ayarı kaldırmış sanırım.
Şimdi araştırmalarıma göre, robots.txt ten /page olarak engellemek işe yaramıyor.Nasıl yaramıyor onu da anlatayım. Google yine o sayfaları indexliyor ama dizinde göstermiyor. Google sayfasında yazıyor zaten robots.txt ten engellemeniz index almayacağı anlamına gelmez diye. Ancak sayfaya noindex atarsanız engellenmez diyor.
Gel gelelim yoast ta bu yok. All in seo ya da sadece bu sebepten geçilmez.
Search consoleden girip bakıldığında page1 page2 şeklindeki sayfaları yinelenen içerik olarak gösteriyor.
Henüz çözüm bulamadım.
header'a
bunu eklesek sorun çözülür mü acaba ?
<?php if($paged > 1 || is_author() || is_tag() || is_date() || is_attachment()){
echo '<meta name="robots" content="noindex,follow" />';
} ?>
Aynı sorun bende de var ancak bende kategorilerde sorun var. Şöyle ki
www.siteadi.com/kategori-adi/page/2 www.siteadi.com/kategori-adi/page/3
www.siteadi.com/kategori-adi/page/4
www.siteadi.com/kategori-adi/page/5 şeklinde gidiyor tek çare robots.txt */page/* koydum. Başka yapacak bişe yok yoast kullanıyorsan veya varsada ben bulamadım. robotx.txt de bunu koyunca yenilenen içerik sorunu kalkacaktır. Ayrıca page sayfalarına canonical ile ilk sayfayı işaret edebilirsin. Veya yoastdan kendi kendine next prev etiketleri geliyor onlarda bir nevi sorunu çözüyor. Bu next prev etiketleri zaten arama motorlarına o sayfaların bir birine benzer sayfalar olduğunu anlatıyor.