Spinnen machen den Großteil unseres Verkehrs aus!

[spdegabrielle (Stephen De Gabrielle)]

Ich bin ein Administrator einer kostenlosen Instanz für Open Source, die mir von den netten Leuten von Discourse freundlicherweise zur Verfügung gestellt wird.

Ich sehe, dass es Teil davon ist, ein guter Mensch zu sein, diese Freundlichkeit nicht auszunutzen, indem man Ressourcen über die Bedingungen des kostenlosen Dienstes hinaus nutzt.

Leider nehmen Spinnen den Großteil unserer Ansichtenzuteilung in Anspruch und scheinen nur noch schlimmer zu werden. (Leidet noch jemand darunter?)

Kann mir jemand Vorschläge machen, um dieses Problem zu mildern?

Mit freundlichen Grüßen
Stephen

[Jagster (Jakke Lehtonen)]

Sie können die meisten Bots sperren. Das hilft. Aber Discourse kümmert sich nicht darum, wenn WordPress in die Knie gezwungen würde.

Wie man Menschen fängt… nun, sagen Sie es uns allen, wenn Sie es herausfinden.

[supermathie (Michael Brown)]

Vielen Dank für die Wertschätzung; angesichts der zunehmenden Scraping-Aktivitäten war dies für viele unserer Kunden ein Anliegen.

Sie können Ihren Bot-Bericht überprüfen und die eklatantesten Crawler von Ihrer Website blockieren, das wäre ein guter Anfang.

Wir arbeiten daran, bessere Tools für die Verwaltung dieses Problems zu entwickeln, aber für die nächste Zeit, es sei denn, es wird zu einem DRASTISCHEN Problem, machen Sie sich keine Sorgen.

[Jagster (Jakke Lehtonen)]

Das einzige Problem dabei ist die Benutzeroberfläche. Das Hinzufügen dieser Discourse-Wege ist irgendwo mühsam, da es ziemlich viele dieser nutzlosen SEO-Bots und andere Content-Diebe gibt. Wenn wir eine Möglichkeit hätten, eine Liste oder so etwas zu senden