Evet yapabilirsiniz:
https://wordpress.org/plugins/custom-sidebars/
https://wordpress.org/plugins/advanced-sidebar-menu/

Yardimci olacaktir bu eklentiler.