¿Añadiste esa estrofa a tu app.yml? Esas configuraciones deben estar en el NGINX que está dentro del contenedor. Ver también Set up Discourse on a server with existing Apache sites. Eso es para Apache, pero la parte que va en app.yml es la misma, independientemente de lo que esté haciendo el proxy inverso.