@Astra カスタム絵文字セットを作成するには、こちらのトピックをご覧ください。
プラグイン内でリアクションを追加または削除するには、サイトの設定に移動し、plugin:discourse-reactions で検索してください。スクロールすると discourse reactions enabled reactions という設定が表示されます。ここで許可されるリアクションを変更できます。また、作成したカスタム絵文字を追加することも可能です。
plugin:discourse-reactions
discourse reactions enabled reactions
お役に立てれば幸いです