Veritabanı ve panel optimizasyonu yapabilirsiniz.
Muhtemelen problem hosting kaynaklarının yetersiz olmasından. Şayet admin panelinde bile gecikme yaşanan bir hosting kullanıyorsanız değiştirmenizi öneririm.
Hosting değil hocam sunucu ve 128 gb rami olan yüksek sunucuda barınmakta sunucu hız konusunda asla bir problem olmaz da, biraz wordpressi kurcaladık eklenti kaynaklı olduğunu düşünüyorum girebilsem panele pasif edicem de hepsini (sunucudan silersem büyük kayıplar yaşarız)