Dostum hangi temayı kullanıyorsun bilmiyorum ama ücretli kaliteli temalar var.
Newspaper teması kullanıyorum. Cache eklenti ayarlarım temadaki açıklamalar ile düzenlenmiştir. Buna ek olarak ücretsiz cloudflare kullanıyorum.

hızım 98

Bitane daha sitem var o sitede ücretsiz sydney teması var. Cache ayarları + cloudflare var
Sayfa hızı 96

Sayfa hızı için aylarca uğraşanları bilmiyorum ama adam akıllı bir tema alırsanız hiç sorun yaşamazsınız. Newspaper öneririm.

Bu arada düz bir tema ile bile cache eklentisi ayarları kusursuz yapılırsa hızınız zaten 90 altında olmaz.