Şöyle bir deneme yapın. Temiz bir wordpress kurun sıfır orjinal ve orada bir hız testi yapın. Eğer orada da bir yavaşlık varsa bulunduğunuz sunucudan kaynaklı olabilir.