Hola,
Sí, el anterior es para el botón de registro en la cabecera. 
Creo que en este caso la forma más fácil es sobrescribir la plantilla principal para añadir el icono. También podemos hacerlo con un outlet de plugin, pero creo que en esta página realmente no importa porque si usamos un outlet de plugin, tendremos que crear nuevos botones y ocultar la sección de botones predeterminada.
Puedes eliminar el componente de la versión anterior que creaste porque no es relevante y no resolverá tu problema.
He creado un componente de tema sencillo que puedes instalar. He añadido algunas configuraciones donde puedes cambiar los iconos de estos botones (Registrarse e Iniciar sesión).