Şunu da dener misiniz:

RedirectMatch 301  ^/([^/.]+)\.html/$ /$1/

Unutmadan; daha önce function.php dosyasına .html yapısıyla alakalı bir şey eklediyseniz, onu da silmeyi unutmayınız. Ayrıca, denediğiniz her link ayrı olmalı ki, bir önceki önbelleğe alıyorsa yönlense de açılmayabilir.

Ayrıca, az önceki de olmazsa şunun olması gerekiyor;

RewriteRule (.+)\.html?$ https://www.siteadresiniz.com/$1/ [R=301,L]

veya...

RewriteRule (.+)\.html/?$ https://www.siteadresiniz.com/$1/ [R=301,L]