Şöyle bir eklenti var işine yarar. https://wordpress.org/plugins/wp-no-tag-base/

Başlık için ise, başlığın bulunduğu class 'a text-transform aşağıdaki değerleri verebilirsin.

text-transform özelliğinin alabildiği değerler ise şunlardır;

    none : Metin değiştirilmez. (Varsayılan değer)
    capitalize : Metindeki her kelimenin ilk harfi büyük gösterilir.
    uppercase : Metindeki tüm harfler büyük gösterilir.
    lowercase : Metindeki tüm harfler küçük gösterilir.