Сердце — это иконка Font Awesome. Если вам нужна иконка «Палец вверх», вам нужно добавить иконку Font Awesome в иконки сайта, а затем использовать её в плагине Reactions.
Эта иконка не является эмодзи.
fa-thumbs-up, думаю, это та иконка, которую вы ищете.
Компонент темы также использует тот же метод для замены иконки на другую иконку Font Awesome 5.