Aranhas representam a maior parte do nosso tráfego!

Sou um administrador em uma instância gratuita de código aberto, gentilmente fornecida pelas pessoas maravilhosas da Discourse.

Vejo que parte de ser uma boa pessoa é não abusar dessa gentileza usando recursos além das condições do serviço gratuito.

Infelizmente, spiders têm consumido a maioria da nossa alocação de visualizações e parecem estar piorando. (Mais alguém sofre com isso?)

Alguém pode fazer alguma sugestão para ajudar a mitigar esse problema?

Atenciosamente,
Stephen

Você pode banir a maioria dos bots. Isso ajuda. Mas o Discourse não se importa quando um WordPress estaria de joelhos.

Como pegar humanos… bem, diga a todos nós quando você descobrir.

1 curtida

Obrigado pelo reconhecimento; com o aumento do scraping, isso tem sido uma preocupação para muitos de nossos clientes.

Você pode verificar seu relatório de bot e bloquear os rastreadores mais graves de seu site, isso seria um bom começo.

Estamos pensando em desenvolver melhores ferramentas para gerenciar isso, mas por enquanto, a menos que se torne um problema DRÁSTICO, não se preocupe com isso. :heart:

5 curtidas

O único problema com isso é a UI. Adicionar essas coisas do Discourse é meio chato em algum lugar, porque existem muitos desses bots de SEO inúteis e outros ladrões de conteúdo. Se tivéssemos alguma maneira de enviar uma lista ou algo assim :smirking_face:

1 curtida

This topic was automatically closed 30 days after the last reply. New replies are no longer allowed.