La mayor parte de la lógica para esto ya está en el plugin private replies. Solo necesitaríamos cambiar las reglas de negocio sobre cuándo se vuelven visibles las respuestas, aunque ya debería ser posible ajustando algunas configuraciones (poco lógicas).