Estoy bastante seguro de que necesitas agregar algo a tu app.yml que le indique a nginx que reconozca tu dirección IPv6 y retransmita la dirección del cliente. Aunque aún no he logrado averiguar cómo hacerlo. Los temas sobre la ejecución de un proxy inverso incluyen ejemplos de IPv6 que ofrecen pistas.
Esto está en mi lista de cosas por resolver, pero tengo una lista bastante larga. Terminé desactivando IPv6, creo que debido a este problema, aunque quizás por alguna otra falta de conocimiento sobre IPv6.
(Jeff, puedes obtener un bloque IPv6 enrutado, pero debes solicitarlo y luego configurar tus hosts para que lo utilicen.)