Obrigado, Josh, aprecio o feedback aqui.
Boa observação e, embora mal executado, levando muitos meses, o Google parece ter descoberto quais páginas significam o quê.
Em outras palavras, eventualmente, comecei a ver cada vez mais as páginas para as quais fiz 301 para as palavras-chave usadas nas páginas antigas.
Isso faz muito sentido e verei como posso implementar isso. Atualmente, o Search Console não mostra o rastreador chegando a 301 com frequência. Parece que quando a classificação melhora, eles seguem mais 301. Causalidade sem correlação, talvez.
Não é de forma alguma uma crítica ao Discourse - simplesmente não me convenço facilmente com “milhares de usuários do Discourse têm ótimo tráfego orgânico”.
O Google também não vai nos dizer.
Devemos sempre lembrar que o Google é um algoritmo, eles não estão olhando para isso com olhos humanos.
Embora ambas as versões compartilhem conteúdo semelhante, e o Google saiba que não é cloaking malicioso, eles ainda precisam ajustar a classificação.
Uma versão parece muito melhor, funciona melhor e dá alguma noção de estrutura de links internos. A outra é um feed RSS glorificado.
O Google não tem ideia de que tenho este fórum sofisticado que funciona em todos os dispositivos [modernos], realmente incentiva a discussão e é uma das coisas mais legais que a internet já criou.
Sempre gosto de usar o link do-follow “Powered by discourse” na versão do rastreador. (apenas porque é fácil)
Novamente, sei que não é malicioso, mas você deve olhar para isso através dos olhos do Google. Você, FlyNumber (não https://community.cloudflare.com/), está nos dando esta versão do rastreador com um link externo que você não mostra aos navegadores normais.
Eu poderia totalmente ver o algoritmo percebendo o que está acontecendo e ignorando o link externo para o domínio cloudflare (já que é uma autoridade tão grande)
Não é como se o que o Google aplica ao Cloudflare se aplicasse a mim.
Alguém pagou a você por este link externo que você mostra aos bots (mas não quer mostrar aos usuários normais?) é mais sobre como eles podem olhar para o site. Não estou dizendo que é isso - mas é uma possibilidade que você vai querer eliminar.
Em termos mais simples, a versão do rastreador não tem um menu ou qualquer estrutura real.
Esse é o conteúdo que o algoritmo acha que você quer servir aos usuários finais.
De uma perspectiva muito geral, não consigo ver o algoritmo recompensando isso.
Talvez seja hora de começarmos a considerar uma reforma completa da versão do rastreador. Pelo menos adicione o menu principal e os tópicos sugeridos na parte inferior.
Atualização interessante: O Google adicionou “JSON” aos “tipos de arquivo” nas estatísticas de rastreamento da minha instância do Discourse. “Javascript” é um “tipo de arquivo” separado.
Acompanharei de perto, mas ainda adoraria que isso fosse renderizado corretamente na ferramenta do Google.