Usando Docker, parar o servidor de responder ao endereço IP (em vez de nome do host)

Estou procurando a maneira preferencial de impedir o acesso ao meu servidor Discourse Docker quando o usuário está usando apenas o endereço IP. Olhando a configuração do nginx do contêiner, parece que qualquer solicitação feita para http://myipaddress é redirecionada para https://mydomainname. Eu gostaria de retornar 403 em vez disso.

Talvez eu esteja desinformado, mas parece mais seguro simplesmente descartar a conexão em vez de ajudar um bot de escaneamento redirecionando.

A melhor opção é colocar outra configuração do nginx na frente? Se for o caso, existe uma maneira de alterar a porta do Docker Discourse padrão?