sitenizin robots.txt dosyasını düzenlemeniz gerekiyor örnek dosyalar için alttaki linki kontrol edin
https://www.r10.net/wordpress/190232-...obots-txt.html