Sì, infatti, era così. Il plugin docker_manager stava caricando due file JS in un template utilizzando javascript_include_tag, che non è consapevole di DISCOURSE_S3_CDN_URL, quindi stava utilizzando come predefinito DISCOURSE_CDN_URL e causando problemi alla CSP.
Dovrebbe essere corretto ora tramite FIX: blank upgrade page when using S3 CDN and CSP · discourse/docker_manager@3d37fd6 · GitHub
@paulrudy se aggiorni il plugin docker_manager, non dovrai più aggiungere manualmente https://cdn-to-discourse.b-cdn.net/assets/ alla tua CSP.