Discutir qual proxy reverso você deve usar está claramente fora do escopo de suporte. 
Mas, após examinar o NGINX Proxy Manager por 12 segundos ou mais, acredito que ele funcionará bem. Há outra ferramenta “automágica” de proxy NGINX que já vi ser discutida anteriormente também, mas com meu extenso conhecimento do NGINX Proxy Manager, acho que ele pode ser melhor. Posso dar uma olhada nela, pois estou ficando desiludido com o Traefik.
EDIT: Agora examinei a ferramenta por 3 minutos. Prefiro ferramentas que facilitem a automação, então o Traefik e o jwilder/nginx-proxy - Docker Image (que encontrei), que permitem adicionar algumas labels ou variáveis de ambiente ao contêiner Docker para que não seja necessário clicar em uma interface web, são mais o que eu quero. Parece que, para fazer aquela outra ferramenta funcionar, você precisa usar a interface web ou se virar para atualizar o banco de dados manualmente com os hosts que deseja adicionar. Mas, se você estiver disposto a clicar e mexer em uma interface web como uma Pessoa Normal (em vez de um “pessoal” administrador de sistemas), então parece que aquela ferramenta pode ser exatamente o que você está procurando.