おそらく、[1, 2, 3] のような事象に何度か見舞われた後に、「コンテナの停止 → git pull → launcher の再構築」というアップグレード手順を使い始めたため、オフラインページを実装しただけかもしれません。
もしかすると、アップグレードプロセスを円滑に進めるために、PostgreSQL が時間内にシャットダウンしなかった場合に強制的に終了させる処理の堅牢性が何かしらの変更を受けたのかもしれません。
いずれにせよ、オンラインアップグレード（再び）は、今すぐ再度試したところ、私どもにとって問題なく機能しました。そのため、お騒がせして申し訳ありませんでした。無視してください。
[1] Discourse stuck on "Currently Upgrading" - #15 by amotl
[2] Upgrade failed due to unclean database shutdown
[3] https://meta.discourse.org/t/upgrade-failed-due-to-unclean-database-shutdown-ii/103268