Olá, Equipe,
No painel da comunidade, vejo muitos crawlers fazendo login no site. Não consigo identificar quem são e como chegaram aqui.
Quem são esses visitantes?
Como posso analisar a atividade deles e que tipo de ação estão realizando?
Como é possível rastreá-los?
Por favor, me ajudem com essas informações.
Tenham um bom dia!
Obrigado.
Vidyaranjan
Olá Vidyaranjan,
Tente verificar /admin/reports/web_crawlers para obter um relatório detalhado sobre os crawlers. Em seguida, você pode bloquear aqueles que não achar úteis ou benéficos, adicionando-os à configuração do site blocked crawler user agents. Essa configuração aceita uma palavra, sem distinção entre maiúsculas e minúsculas, que exista na string do user agent.
Desculpe retomar o tópico, mas ainda não encontrei o que estava procurando. Primeiro, as estatísticas do rastreador disponíveis na página de relatórios me dão informações sobre o número de visualizações de página do rastreador e seus user agents, mas pouco mais em termos do que fazer com essas informações. Rastreadores em geral não são um problema para mim, mas picos no acesso de rastreadores tornam as estatísticas do painel quase inutilizáveis.
Veja, um único pico em 16 de dezembro leva a uma compressão de todos os gráficos a ponto de torná-los difíceis de ler. Além disso, que valor essa informação tem mesmo? Nenhum. Esse foi o dia da queda do Google na semana passada, então provavelmente, assim que o Google voltou, todos esses rastreadores aumentaram sua atividade. Grande coisa.
Então, minha pergunta é: posso remover os rastreadores das estatísticas principais do painel de administração?
Ah, muito obrigado! Nunca soube que podia clicar nesses itens.
