Les araignées représentent la majorité de notre trafic !

Je suis administrateur d’une instance gratuite pour l’open source, aimablement fournie par les merveilleuses personnes de Discourse.

Je considère qu’une partie du fait d’être une bonne personne est de ne pas abuser de cette gentillesse en utilisant des ressources au-delà des conditions du service gratuit.

Malheureusement, les robots d’indexation consomment la majorité de notre allocation de vues et semblent ne faire qu’empirer. (D’autres personnes souffrent-elles de cela ?)

Quelqu’un peut-il faire des suggestions pour aider à atténuer ce problème ?

Cordialement,
Stephen

Vous pouvez bannir la plupart des bots. Ça aide. Mais Discourse ne s’en soucie pas quand un WordPress serait à genoux.

Comment attraper les humains… eh bien, dites-le nous quand vous aurez trouvé.

1 « J'aime »

Merci pour votre appréciation ; avec l’augmentation du scraping, cela a été une préoccupation pour bon nombre de nos clients.

Vous pouvez consulter votre rapport de bot et bloquer les robots les plus flagrants de votre site, ce serait un bon début.

Nous étudions le développement de meilleurs outils pour gérer cela, mais pour l’instant, à moins que cela ne devienne un problème DRASTIQUE, ne vous en inquiétez pas. :heart:

5 « J'aime »

Le seul problème avec cela est l’interface utilisateur. L’ajout de ces éléments à la manière de Discourse est un peu pénible quelque part, car il y a pas mal de ces robots SEO inutiles et d’autres voleurs de contenu. Si nous avions un moyen d’envoyer une liste ou quelque chose comme ça :smirking_face:

1 « J'aime »

This topic was automatically closed 30 days after the last reply. New replies are no longer allowed.