Sei que este é um post antigo, mas a sugestão abaixo pode ser útil para qualquer administrador que deseje uma interface limpa, mantendo o modo Bootstrap ativado no seu fórum Discourse.
Você pode simplesmente adicionar o seguinte à seção de CSS comum do seu tema:
#global-notice-alert-bootstrap-mode {display:none!important;}