Consigo reproduzir o problema também no desktop.
Não tenho certeza se isso deve ser classificado como um bug, mas realmente precisa ser corrigido. Note que há um tópico duplicado sobre este assunto na categoria Contribute > UX Description of notification level isn't refreshed after change. Essa categoria seria mais adequada para este problema, mas deixarei este tópico aberto por enquanto.