Você pode anonimizá-los. Dessa forma, as informações permanecem, mas não o usuário.
Outra coisa que você pode fazer é implementar lógica personalizada para, em vez de criar o usuário, adicioná-lo a um novo grupo. Dessa forma, o resumo deve ser acessível apenas a quem tem permissão para acessar a categoria.
Outra coisa que você pode fazer é executar algum tipo de cronjob que force o logout (ou a remoção da conta) em todos os usuários que foram cancelados.