É possível personalizar o texto em (admin > personalizar > texto) — pesquisar por “com google” deve exibir o que você precisa editar.
O logo no botão pode ser ocultado com CSS adicionado a um tema (admin > personalizar > temas):
.btn-social.google_oauth2 .d-icon {
display: none;
}
Aviso justo, no entanto, há um histórico de o Google verificar a conformidade com suas especificações e enviar e-mails de aviso aos administradores… algo tão pequeno quanto usar a cor errada já chamou a atenção deles antes: Not compliant with google signin branding requirements