Instalar correctamente certificado SSL a mi tienda tanto para www como para non www.

Tengo una tienda creada en prestashop en un servidor privado Centos de OVH. Le instalé un certificado SSL gratis de Let's Encrypt y creí que todo estaba bien hasta que me di cuenta que está presentando un problema el tratar de acceder a la página en Explorer y Firefox incluyendo el www. Chrome sí está realizando la redirección de www con el http:// y el https:// pero explorer y firefox no lo hacen entonces sale un aviso que dice que está tratando de acceder a un lugar no seguro. No quisiera tener que instalar un certificado independiente para el www y el non www, sino utilizar el mismo del non www. Quiero que todos los usuarios ingresen al non www, exactamente a [login to view URL]