css ile yapabilirsin.

örneğin:

<div class="partlist">
<?php wp_link_pages('before=<p>&after=</p>&pagelink=%.Bölüm'); ?>  
</div>

şeklinde kodunu single.php ne ekle. Temanın css dosyasına

#partlist  { margin: 10px 0 0 0;  }
background-color:#750922;}
#partlist a {font:bold 10px tahoma;padding:6px;background:#f03; color:#fff; text-decoration:none;}
#partlist a:hover 
background-color:#00000
;}

Şeklinde kodları oluşturarak renklendirebilirsin.Sen kendine göre ayarlarsın.