Anladım hocam. Yukarı da seohocasının örnek robots.txt verdim. Onu kullanıyordum. Acaba sizin önereceğiniz bir robots.txt var mı? Yaşadığım sorunları minimuma indirecek düzeyde? Teşekkürler.
User-agent: *Disallow: /wp-admin/Allow: /wp-admin/admin-ajax.phpSitemap:
https://www.siteadresi.com/sitemap.xml.gz
Bunu kullanıyorum yalnız all in veya yoast kullanıyorsanız ona göre iç sayfaların indexlenmemesini de düzenlemeniz gerekiyor.