Tá tudo bem. Desde que as coisas avancem, ou pelo menos que a gente tenha essa impressão, não é tão problemático. Em termos absolutos, é possível conversar por voz, mas não estou convencido de que isso vai melhorar ou ser mais rápido (na verdade, acho que vai ser o contrário).
Quanto à navegação, o @Benjamin_D já deu a solução.
Quanto à primeira consideração, como mencionado acima, o que se entende aqui por “ver”? Que não seja acessível/visível de jeito nenhum, ou apenas que não apareça na aba “atividade” do grupo? (mas continuará visível e acessível de outras formas).
Se tomarmos a analogia de passar na TV para a atividade pública, você quer apenas que não apareça no guia de programação? Ou que não passe de jeito nenhum na TV, ou que o acesso ao canal seja impossível?
O que é público é visível, ou não deve ser (torná-lo privado, o que também restringe o número potencial de participantes e, portanto, a discussão possível), ou torná-lo impossível (não há nenhuma parte pública. Nesse caso, é claro que não haverá discussão “fora do grupo”, se for a única coisa à qual têm acesso). Ainda pode restar a questão das mensagens privadas. No pior dos casos, você também pode criar vários fóruns distintos para cada grupo de pessoas, que então ficarão totalmente separados, com possíveis configurações/parâmetros diferentes. Essa é uma solução/possibilidade.