Temanızı menü* destekli yaptığınızı varsayarak en basit şekilde anlatıyorum hocam.

Admin panelinden Menü -> özel bağlantı kısmına gelip mesela RSS menusu oluşturun. Menüyü oluşturuken Css class kısmına menu-rss gibi bir class atayın. (https://codex.wordpress.org/WordPress_Menu_User_Guide)

style.css dosyanıza ekleyin

.MENU-CLASS .menu-rss { 
	float: right;  
	margin-right: 5px; // AYARLAYIN
	background: url(images/RSS.png) no-repeat right;
}

temanızın /images klasörüne de iconu atmanız yeterli.

.MENU-CLASS yazan kısımı menünüzün classı ile değiştirin.

eklediğiniz ikinci icon için 5px kısmını biraz daha büyük tutun. mesela 12px gibi. üçüncüsü için 19px gibi.