Eğer ki kaldırmayı bulamazsanız şu kodu deneyebilirsiniz.

Dashboard - Görünüm - Özelleştir - Ek CSS

.form-wppp-select products-per-page { visibility: hidden;}

Bu kodu yazdıktan sonra genel olarak sayfayı incele bozulan bir şey var mı yoksa bu şekilde kullanabilirsin.