Olá,
Sim, o anterior era para o botão de inscrição no cabeçalho. 
Acho que neste caso a maneira mais fácil é sobrescrever o template principal para adicionar o ícone. Podemos fazer isso com um plugin outlet também, mas acho que nesta página realmente não importa porque se usarmos um plugin outlet, teremos que criar novos botões e ocultar a seção de botões padrão.
Você pode excluir o componente da versão anterior que você criou porque ele não é relevante e não resolverá seu problema.
Eu fiz um componente de tema simples que você pode instalar. Adicionei algumas configurações onde você pode alterar os ícones desses botões (Inscrever-se e Entrar).