her kategori için farklı arşiv sayfası çağırırsın onuda şöyle yapabilirsin

category-idno.php id 5 ise eğer category-5.php sonra oluşturduğun arşivde farklı sidebarı ise önceki sidebar kodunun yerine yani yandaki kodu <?php get_sidebar(); ?> alttaki kod ile değişerek yapabilirsin

<?php include (TEMPLATEPATH . '/sidebar-yeni.php'); ?>