Essa é uma alternativa bem simples:
RewriteEngine On
RewriteCond %{HTTPS} !=on
RewriteCond %{HTTP_HOST} ^(www\.)?domain\.com$ [NC]
RewriteRule ^.*$ https://www.domain.com%{REQUEST_URI} [R,L]
Se preferir que vá tudo para o sem www, troque a última linha por:
RewriteRule ^.*$ https://domain.com%{REQUEST_URI} [R,L]
Se preferir manter o www igual digitado, troque a última linha por:
RewriteRule ^.*$ https://%1domain.com%{REQUEST_URI} [R,L]
Lembrando que se você puser o certificado no mesmo IP dos sites SEM certificado, e alguém tentar acessar https://site-sem-certificado.com.br vai dar erro de qualquer jeito, pois a negociação do SSL vem antes do Apache processar a página.
E é por isso que site com SSL se coloca em IP exclusivo (ou se gasta dinheiro com certificados pra múltiplos domínios).
tirei essa resposta daqui