Bu eklenti ile yapabilirsin.
https://tr.wordpress.org/plugins/permalink-manager/