Hospedar as fontes localmente é sempre uma boa opção, pois você elimina a dependência de um recurso externo, reduzindo assim uma requisição de rede. Você pode baixar e hospedar as Google Fonts por conta própria, e as opções de fontes integradas do Discourse também são originadas do Google, mas não dependem dos servidores deles.
Como mencionado, ter as fontes servidas diretamente do seu site é melhor para o desempenho (embora as fontes geralmente sejam pequenas, então não é uma grande preocupação). Tente não incluir mais variantes e estilos do que o necessário; normalmente, duas fontes diferentes com pesos normal e negrito são suficientes.
Principalmente, evite fontes que sejam muito finas visualmente. Se o seu site tiver um modo escuro, verifique a legibilidade nesse modo também… às vezes, o esquema de cores pode fazer uma grande diferença. Tente ampliar/reduzir o zoom no navegador e alterar o tamanho da fonte nas preferências do usuário para garantir que nada inesperado ocorra.