Los temas de instalación de desarrollo howto describen cómo ejecutar las pruebas y creo que esas pruebas se ejecutarán contra todos los complementos instalados. Muchos complementos no tienen pruebas o podrían estar escritos de manera que causarían fallos en las pruebas si están diseñados para cambiar la forma en que funciona Discourse.
Además, hay (Superseded) Set up plugin continuous integration tests on Travis CI que te permitirá ejecutar pruebas para un complemento determinado en cada confirmación.
Me interesaría saber cómo hacer que Travis ejecute una prueba completa contra un conjunto específico de complementos para confirmar que no hay conflictos. Algún día me pondré a crear un tema sobre eso.
Es seguro que las pruebas de todos los complementos mencionados anteriormente fallarán y saber que fallan no será útil para nadie.