Os tópicos howto de instalação para desenvolvimento descrevem como executar os testes e acredito que esses testes serão executados em todos os plugins instalados. Muitos plugins não possuem testes ou podem ser escritos de forma que causem falhas nos testes se forem projetados para alterar o funcionamento do Discourse.
Além disso, há (Superseded) Set up plugin continuous integration tests on Travis CI, que permite executar testes para um plugin específico a cada commit.
Gostaria de saber como configurar o Travis para executar um teste completo em um conjunto específico de plugins, a fim de confirmar que não há conflitos. Um dia vou criar um tópico sobre isso.
É certo que os testes de todos os plugins mencionados acima falharão, e saber que falham não será útil para ninguém.