Fiz um teste ontem com cerca de 40-50 usuários no meu fórum simultaneamente. Foi durante uma partida de futebol de 90 minutos, onde substituímos o fórum ao vivo por um chat.
Dado que minha equipe perdeu, recebi muitos feedbacks críticos. Foi um bom teste para começar.
Descobri algumas coisas.
Aparentemente, há problemas associados ao número de usuários. Algumas pessoas relataram que não conseguiam fazer login, outras foram desconectadas. Os mesmos usuários não tiveram problemas mais tarde. Nenhuma mensagem de erro foi relatada ao usuário.
Os usuários não gostaram de poder usar os emoticons em suas próprias postagens. Eles também não gostaram de como as postagens eram agrupadas se eles postassem 2 ou 3 vezes seguidas. Eles prefeririam postagens separadas.
Alguns tiveram dificuldades em entrar e sair de grupos. Isso acabou sendo mais uma questão de letramento em TI. No entanto, um ícone mais claro/uma descrição melhor no menu suspenso pode ajudar.
O que as pessoas gostaram foi a privacidade em um fórum, que de outra forma seria aberto. A capacidade de substituir alguns grupos do WhatsApp.
Coisas importantes para eles (dado que expliquei que fórum = coisas que você quer armazenar vs chat = chamar o árbitro de idiota) é garantir que o chat seja transitório. Algo como todo chat com mais de 14 dias é excluído. Ou salas de chat inteiras se autodestroem após 14 dias. Isso fazia parte do lado da privacidade.
A capacidade de excluir manualmente salas de chat também seria ótima 
Eles gostaram de como as postagens foram movidas para o fórum quando vinculadas ao chat.
Espero que o feedback ajude 