Você adicionou essa estrofe ao seu app.yml? Essas configurações precisam estar no NGINX que está dentro do contêiner. Veja também Set up Discourse on a server with existing Apache sites. Isso é para Apache, mas a parte que vai em app.yml é a mesma, independentemente do que esteja fazendo o proxy reverso.