Estou executando um fórum Discourse (forum.evteam.pl) e estou com dificuldades para que minhas páginas sejam indexadas pelo Google. Embora algumas páginas tenham sido indexadas, a maioria permanece não indexada, apesar de eu ter enviado um sitemap.
Aqui está a situação atual:
Apenas 8 páginas indexadas de mais de 180.
O número de páginas indexadas aumentou brevemente, mas depois caiu novamente.
O Google Search Console mostra 172 páginas como não indexadas.
O sitemap não é aprovado há muito tempo.
O desempenho de pesquisa é muito baixo, com quase nenhum clique do Google.
Verifiquei o seguinte: Robots.txt – Nenhuma restrição óbvia. Sitemap.xml – Enviado, mas ainda não aprovado. Tags Noindex – Não presentes em páginas importantes. Google Search Console – Nenhuma penalidade manual ou problema de segurança.
Alguém já passou por problemas semelhantes com fóruns Discourse? Isso pode ser devido às políticas de indexação do Google, ou há algo que eu possa estar perdendo? Alguma dica sobre como resolver isso?
\\u003cyoursite\u003e/admin/reports/web_crawlers para ver se o Googlebot está na lista?
a configuração do site allowed_crawler_user_agents para ter certeza de que você não está bloqueando o Google acidentalmente (compartilhe isso aqui, se possível)
Essa pode ser uma má ideia — a menos que você tenha certeza absoluta de que todos os outros bots podem ser desautorizados. O Google usa muitos rastreadores que não declaram a string googlebot.
Robots.txt – Nenhuma restrição óbvia.