Até agora, não consegui reproduzir o problema. Em um site de teste, criei um chat em grupo com outros três usuários (0 administradores, 1 moderador, 2 usuários normais). Enviei algumas mensagens e, cerca de 3 minutos depois, todos os três usuários receberam seus e-mails.
Nenhum desses usuários de teste havia visitado o site por um bom tempo.
Você pode tentar criar um usuário de teste não administrador em seu site usando um endereço + para testar isso e ver se consegue reproduzir?