El sistema de moderación de Discourse tiene un sistema de ponderación que funciona de la manera que usted describe. La probabilidad de que una publicación marcada sea oculta se basa en la fiabilidad de las marcas anteriores del usuario que marca. La puntuación se determina por el porcentaje de veces que las marcas de un usuario han sido acordadas por un miembro del personal.
No creo que el sistema de ponderación de marcas esté documentado en Meta. Uno de mis objetivos para la próxima semana es intentar documentarlo.
Edición: solo añado una nota de que este tema hace un buen trabajo documentando cómo se ponderan las marcas dependiendo de las marcas previas de un usuario: Managing user reputation and flag priorities.