Kendi sunucumda ve müşterilerin sunucularında sürekli vesta panel kullanırım hiçbir sıkıntısını görmedim, site hızı sadece sunucu veya panel ile alakalı değildir.Css,jquery,img gibi dökümanların sıkıştırılması lazım veya siteniz uzaktan bir dosya çekiyorsa o da hızı etkiler.Birçok varyasyon sayabilirim bu konuda vesta panel en son sıralarda gelebilir.