Aynısını ben yaptım Wordpress sitemde. URL yapısı çok uzundu kısaltmak istedim. Yoast SEO bu durumda otomatik olarak eski post URL'lerini yeni URL'e yönlendirdi. Zamanla eski URL'li indekslerimin yerini Yeni URL'lerim aldı. Bu durumun oturması için sitemap gönderip ve google'ın siteyi taramasına bırakın. Zamanla düzelir.

Kısacası URL'lerini değiştirin ama URL'ler için 301 yapmayı unutmayın.

301 yönlendirmesi için hostinginizde ki .htaccess dosyasına Redirect 301 /eski-sayfa.html /yeni-sayfaniz.html şeklinde ekleme yapın.