Puedes ocultar el botón “Me gusta” con CSS, pero eso no impedirá que los usuarios den “Me gusta” a las publicaciones (se requeriría un plugin para asegurarlo), si descubren cómo volver a mostrar el botón, por ejemplo.
Supongo que la forma más fácil sería usar CSS Classes for Current User's Groups, que añade los grupos del usuario actual a las clases del cuerpo, y luego usar CSS como:
body.category-your-category-slug:not(.group-group_name) {
button.like {
display: none;
}
}
Avísame si tienes problemas para entenderlo 
Aquí tienes un tema relacionado que, lamentablemente, no tuvo ninguna respuesta. Lo enlazo para que ayudar en un tema ayude a resolver el otro.