Kategoriyi harfe göre sıralamak için sidebar.php deki wp_list_cats i aşağıdaki gibi düzenlemeniz yeterlidir.

<?php wp_list_cats('sort_column=name&optioncount=1&hide_ empty=1&hierarchical=1'); ?>