A adorável @j.jaffeux implementou uma atualização hoje que deve resolver isso — você precisará estar com o código mais recente, mas quando testei, funcionou perfeitamente.
Após sair de um chat em grupo, o usuário não será mais listado como membro, não receberá notificações do chat em grupo nem terá acesso direto ao chat em grupo (ou seja, via URL) — até que alguém o adicione de volta ao grupo.
Por favor, dê uma olhada e nos informe se notar algum problema!