Obrigado pelas respostas, pessoal!
@Roman, ainda não tentamos alterar hide_post_sensitivity, pois estamos satisfeitos com a quantidade de denúncias de usuários não-administradores/não-moderadores necessárias para ocultar uma postagem (e aumentar esse limite significaria que postagens ruins demorariam mais para serem ocultadas). Essa sugestão foi inspirada nessa configuração, como um mecanismo semelhante para ajustar o comportamento de ocultação automática.
@sam, sim, isso realmente se resume a tornar mais configurável o quanto confiar nos moderadores. Nossa situação é a de sermos uma organização ferozmente democrática, que chegou em grande número ao nosso fórum Discourse vindos de listas de discussão francamente tóxicas, e exigir que pelo menos dois moderadores se pronunciem sobre as decisões tem sido muito útil para evitar a escalada de conflitos e nos dar mais legitimidade junto aos membros da comunidade para moderar. Posso imaginar que outros fóruns estejam em situações semelhantes, mas não tenho ideia de quantos. E, se isso parecer muito distante dos objetivos principais do núcleo, estou disposto a fazer o trabalho para criar um plugin.
Vocês têm alguma preferência sobre como esses hooks funcionariam, caso afirmativo (ainda não fiz nada com hooks)? Vejo o hook :reviewable_score_updated em app/models/reviewable.rb – talvez um hook :reviewable_user_score_calculated em ReviewableScore.user_flag_score?