Aşağıdaki sorguyu kendine göre düzenleyerek yapabilirsin.

update siteler set siteadresi= replace(siteadresi, 'http://', 'https://')