Eğer temanda bileşen(widget) varsa; bileşenlerden kaldırabilirsin.

Yoksa; sidebar.php(Yan Menü) 'den Silebilirsin.