Site, sitemap vs olmuş mu diye bakabilecek :)

Selamlar arkadaşlar, yeni sitem için sitemap.xml koydum siteye.
Robot txt ye gerek varmı?

Birde sitenin arama motorlarından index alması için herhangi bir sorunu olup olmadığını anlayabilecek arkadaşlar varsa pm atabilir mi? Sitemap search consola ekledim.
Normalde hep hazır kurulu alırdım. Bu sefer de kendim yaptım.( Wordpress site)

User-Agent: *

Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
Allow: /wp-content/uploads/
Disallow: /wp-content/plugins/
Disallow: /readme.html
sitemap: https://siteadi.net/sitemap.xml

robot.txt yi böyle yap hocam.

Yollayın bakayım hocam.

robots.txt ye gerek var. Site haritanizi onada eklemniz botlar icin faydali olacaktir. Ayrica index almasini istemediginiz seyleri de eklemelisiniz.

Botlar sitenizi taradikca zaten hatalari sizlere soyleyecekler. konsoldan takip edebilirsiniz.

Tamam hocam. Bu şekilde değiştiricem. Sitem wordpress zaten.

yeni konu açmadan konuyla ilgili bir soru da ben sorayım etiketleri sitemap'e eklemek gerekir mi yoksa dışarıda mı bırakılmalı ?

Hocam bildiğim kadarıyla etiketleri de indexliyor sanırsam ve Tavsiye edilmiyor.