Estou apenas ecoando o que @Moin disse aqui. Se fizéssemos exclude_groups=admins funcionar, alguém poderia deduzir os membros do grupo de administradores, mesmo sem ter acesso a eles.
Portanto, temo que isso seja intencional e improvável de mudar. Se você quiser que as pessoas possam descobrir os membros do grupo de administradores, será necessário torná-lo visível para todos.