La solución óptima aquí sería actualizar el script de migración para que las redirecciones de permalink se creen automáticamente.
No configures nginx directamente, esos cambios se destruirán cada vez que se reconstruya el contenedor para una actualización.
En su lugar, como dice @pfaffman, edita app.yml para modificar la configuración de nginx.