Ich konnte dies, wie bereits erwähnt, in der GUI tun.
@Falco, @pfaffman, @Jagster, @merefield… dank euch allen habe ich den Reverse-Proxy erfolgreich eingerichtet und habe keine Mixed-Content-Fehler mehr.
Sobald ich auf Port 80 der Discourse-VM per Reverse-Proxy zugegriffen habe und mich registrieren konnte, ging es darum, force_https über die GUI einzustellen und das x-forwarded-proto-Flag im erweiterten Tab des Nginx Proxy Managers hinzuzufügen.