dinamik sidebar mı kullanıyorsunuz yoksa dosyadan mı düzenliyorsunuz:
dinamik sidebarsa, admin paneli/bileşenler menüsünden gösterip gösterilmeyeceği seçilebilir.

yok eğer manualse, sidebar dosyanızı açın, wp_list__category yazan kısmı bul,

 <?php wp_list_categories('show_count=0'); ?>

haline getirip dene...