Echa un vistazo a Configurar Let’s Encrypt con varios dominios/redirecciones y utiliza el mismo tipo de configuración que en ese ejemplo que se añade a la configuración de nginx.
Puedes ponerlo en el hook after_ssl (que añadirías) como en ese ejemplo.