Wordpress Büyük sitelerdeki Sitemap Sorunu HK.

Şuanda yapımında bulunduğum birkaç web sitesinin sitemapinde sorunlar yaşıyorum. Sitelerinin hepsine rank math seo eklentisiyle sitemapler oluşturuluyor ve haber, makale, içerik gibi sayfalar en fazla 120 sayfa içerek şekilde ayrılıyor.

Şuanda örnek verecek olursak 20bin adete yakın haber olan bir web sitesinde her post_sitemap'in 120 sayfadan oluştuğunu düşündüğümüzde 167 adet post_sitemapi oluşturuyorlar. Fakat sorun şurda rank math bu sitemapi oluştururken sürekli olarak çok zorlanıyor. Sitemap 404'e düşürüyor ve bu hatayı çözmek için tekrar rank math eklentisinden sitemapi güncellemek gerekiyor.

Bu durum search console tarafınıda tarama olarak zayıflatıyor botlar bazen geldiğinde sitemap dosyasını bulamıyor.

Merak ettiğim konu benim sadece 20bin yazı olan bir sayfamda bu sorunu yaşıyorsam, eminimki milyona yakın indexi bulunan sayfalarda vardır onlar bu sorunu nasıl çözüyor acaba?

İndex sayısı belirli bir seviyeye ulaşınca manuel olarak oluşturulan sitemapler mi kullanılıyor veya bu sorunları çözmenin farklı bir yolu var mıdır?

Şuadan yeni bir sayfa açılsa ve 1m'a yakın index alması gereken sayfası olsa bu sorun nasıl çözülür?

Belirli bir içerikten sonra parçalama ve sayfalandırma yaparak sitemap oluşturulur ayrıca kitlesel olarak büyük blog ve bilgi sitelerinde sitemap'e bile gerek yok tarayıcı otomatik olarak indexliyor artık.

Hali hazırda rank math parçalama ve sayfalama yöntemiyle sitemapleri oluşturuyor zaten.

Fakat büyük sitelerde eğer ki sayfa sayısına eşit bir trafik elde edemiyorsak tarayıcı halen otomatik olarak taramaya devam eder mi?

Dediğim gibi başka bir örnek olarak yeni bir sayfa açıldı ve döngü ile 1m sayfa oluşturuldu, bu sayfa için bir sitemape gerek yokmu tarayıcı aylar içerisinde tüm sayfaları tarayıp indexe alır mı ?

Spamlardan bahsetmiyorum bu arada

Büyük siteler genelde çekirdek yapıdaki haritaları kullanırlar. Zaten işi bilen büyük site sahipleri böyle eklentiler de kullanmaz. Sistemin kendi yapısı zaten içinde olduğu için aşırı yük bindirmez ki zaten bunu manuel olarak belirleyebiliyorsun ama eklentilerin yükü fazla ne yazık ki. Bir de sürekli cron çalıştırdıkları ve bunları tek tek kayıt ettikleri için diski meşgul ediyorlar yani haliyle sistemi yoruyorlar.

Yanılıyor olabilirim ama sitemap'e eskisi kadar gerek yok gibi. Rank Math zaten Instant Indexing kullanıyor. Ben kapattım sitemap'ı. Ortalama indeks süresi 12 saat şu anda.