No hay forma de excluir a los usuarios de ver algo. Solo puedes configurar quién tiene permiso para ver algo.
Por lo tanto, necesitas cambiar la configuración de todas las categorías para que la mayoría se muestre a un grupo del que tu nuevo grupo de usuarios no sea miembro, y luego agregar el otro grupo solo a su categoría.
Dependiendo de por qué lo quieras, silenciar la mayoría de las categorías para el grupo de usuarios podría funcionar. Eso simplifica la interfaz, pero por supuesto, no previene el acceso. Por lo tanto, no es útil en casos en los que deseas que la información no esté disponible para ellos.