Discourse KI - KI-Triage

Dafür gibt es eine Antwort: KI ist schlecht darin.
Du hast eine etwas romantische Vorstellung davon, was KI ist, was sie kann oder wie ein Mensch mit ihr interagieren kann.
Aber es gibt eine solche semi-automatische Funktion: KI-Helfer. Du kannst es ausprobieren. Aber es gibt einen Grund, warum selbst hier relativ wenig Titel von KI stammen.
Was sie relativ gut kann, ist Korrekturlesen und Übersetzen. Keine große Überraschung, denn das sind Sprachmodelle, die mit Wahrscheinlichkeiten arbeiten. Aber selbst dann hat sie Schwierigkeiten, wenn sie die verwendete Sprache erraten soll.
Wenn man der KI alle semantischen Befugnisse gibt, würde das mehr menschliche Arbeit im Hintergrund bedeuten. Ich lebe in einer Traumwelt, was die Verwaltung angeht. Ich habe keine problematischen Benutzer und keinen Spam. Und doch bekomme ich False Positives – ziemlich selten, aber es gibt sie. Und wenn man versucht, das zu beheben, ist „Administratoren oder autorisierte Benutzer können es bearbeiten und Feedback an die KI geben“ einfacher zu schreiben als zu tun.
Meine Schreibweise ist manchmal schwer für KI, die das beste Englisch kennt. Ich versuche, die Struktur des Englischen richtig zu halten, aber nur wie und in welcher Reihenfolge ich Orte und Zeiten verwenden soll, ist etwas, das ich nicht kann. Wenn eine KI auf eine Situation stößt, in der ich Finnisch mit englischen Wörtern schreibe, korrigiert sie mich manchmal völlig falsch und vergisst oft den Kontext und den Sinn.
Ich meine, was sind die Möglichkeiten einer KI, wenn sie einen Satz bekommt, der nur aus Hieroglyphen besteht, aka. Smileys und Reaktionen? Oder wenn ein Thema nur ein Titel ist? Die Klassifizierung solcher in richtige Kategorien und Tags ist für eine KI nahezu unmöglich.
KI funktioniert gut, wenn ihre Erfolgsquote 85-90 % beträgt und die Behebung der restlichen 10-15 % nicht zu viel kostet. Das ist akzeptabel. Aber wenn ein Moderator so viele Fehler macht, wird der Administrator das Moderationsteam ziemlich schnell wechseln. Gleichzeitig bedeutet das, dass von 1000 Beiträgen 100-150 in der falschen Kategorie mit falschen Tags sind und die Titel nach starker Halluzination erstellt wurden.
Chat GPT ist ein teureres KI-Tool, als es jeder von uns in Foren verwendet. Es lieferte eine Lösung für eine Frage zu Varnish Cache. Es sah richtig aus, funktionierte aber nicht. Ich habe Chat GPT in erster Linie um Hilfe gebeten, um Zeit zu sparen, weil ich zu faul war, die benötigte if-Struktur selbst zu schreiben.
Der Grund war, dass Chat GPT den Unterschied zwischen County-Code und Country-Code nicht erkennen konnte. Das Chatten mit Chat GPT und die anschließende Behebung des Problems dauerte länger, als ich es von Grund auf selbst tun würde.
Warum benutze ich es? Wegen dieser 85% Erfolgsquote.
Aber wenn es nicht sagen kann, wie viele R’s im Wort Erdbeere vorkommen, möchten wir es mit Wörtern und Kontexten arbeiten lassen – weil es das meiste der Zeit tun kann. Aber wenn es versagt und Massenarbeit leistet… kann und wird die Behebung ziemlich anspruchsvoll sein, weil wir auch andere Technik haben.
KI hat meine Zusammenfassungen durcheinander gebracht und gleichzeitig übersetzt. Einfach, diese Einträge zu löschen. Aber neue zu erstellen kostet mich 100 Dollar. Was wäre, wenn es alle Themen in die falschen Kategorien mit falschen Tags einordnen würde und es möglich wäre? Behebbarer, aber kostspieliger Fehler.
KIs sind noch nicht so weit, wenn überhaupt, dass sie „alles“ tun könnten. Das ist mehr oder weniger Science-Fiction. Aber sie können einige Aufgaben erledigen, wenn es Grenzen und gut strukturierte Richtlinien gibt, relativ gut. Aber mit der verschwommenen Realität umgehen… nein.
Ich mag die Idee eines kategorielosen Forums, in dem Tags logisch auf den menschlichen Informationsbedarf zugeschnitten sind und alles automatisiert ist.

2 „Gefällt mir“

[Zitat=“pfaffman, Beitrag:53, Thema:281227”]
Die Wahrscheinlichkeit, dass KI das gut kann, ist gering. Wenn die Person, die das Thema schreibt, nicht genug über die Community weiß, um zu wissen, in welches Thema es gehört oder was ein vernünftiger Titel ist, ist es unwahrscheinlich, dass sie etwas Wertvolles für die Community posten.

Wo hört es für dich auf? Warum sollten Benutzer überhaupt etwas schreiben? Sollte die KI nicht die Themen und die Antworten generieren?
[/Zitat]

Benutzer, die wertvolle Inhalte für die Community erstellen, können diese Bereiche sehen, aber neue Mitglieder kümmern sich im Allgemeinen nicht um Titel, Kategorien oder Tags. In einer Q&A-Community wird lediglich erwartet, dass Fragen gestellt und Antworten erhalten werden (zum Beispiel wie bei einem KI-Bot). Ich möchte diese Anfrage für Benutzer, die eher Anfänger sind und Antworten auf ihre dringenden Fragen suchen, aber gleichzeitig sollten diese Fragen allgemein veröffentlicht werden. Wenn KI verwendet wird, profitieren solche Themen nicht der Community und bleiben im Hintergrund. Es wäre nützlicher, den Seiteninhalt anzureichern und ihn für dieselben Fragen allgemein zu verwenden.

Ich erstelle auch Titel und Tags mit KI und bin diesbezüglich sehr erfolgreich. Ich bin sicher, dass KI mit einem guten Prompt gute Ergebnisse in Bezug auf Kategorien und Tags liefern wird. Das bedeutet natürlich nicht, es dabei zu belassen, die Verantwortlichen können solche Themen erneut überprüfen und die notwendigen Vorkehrungen treffen, aber wir können Zeit sparen, indem wir die Kontrolle darüber zunächst an die KI geben. Inhalte, die sich nicht in der richtigen Kategorie befinden, können gemeldet werden oder eine zuständige Person kann sie korrigieren, wenn sie sie sieht. Ziel ist es, diese Aufgabe zu erleichtern.

Eigentlich kann ich das mit einem einfachen Webhook machen. Ein neues Thema wird eröffnet, die angegebene Seite wird angepingt, die richtige Kategorie (auf der Seite) und die Tags werden mit künstlicher Intelligenz ausgewählt und das Thema wird aktualisiert (mit API). Es wäre jedoch logisch, eine Funktion zu entwickeln, die bereits vorhanden ist.


[Zitat=“Jagster, Beitrag:55, Thema:281227”]
Das ist nämlich eine Antwort: KI ist schlecht darin.

Du hast eine etwas romantische Vorstellung davon, was KI ist, was sie kann oder wie ein Mensch mit ihr interagieren kann.

Es gibt aber eine solche halbautomatische Funktion: KI-Helfer. Du kannst es ausprobieren. Aber es gibt einen Grund, warum selbst hier relativ wenige Titel von KI stammen.

Was sie wieder kann: relativ gut ist Korrekturlesen und Übersetzen. Keine so große Überraschung, da es sich um Sprachmodelle handelt, die mit Wahrscheinlichkeiten arbeiten. Aber selbst dann hat sie Schwierigkeiten, wenn sie die verwendete Sprache erraten soll.

Alle semantischen Kräfte der KI zu geben, würde zu mehr menschlicher Arbeit im Hintergrund führen. Ich lebe in einer Traumwelt in administrativer Hinsicht. Ich habe keine problematischen Benutzer und ich habe keinen Spam. Und doch habe ich falsch-positive Ergebnisse – zwar selten, aber sie sind da. Und wenn man versucht, das zu beheben, ist „Administratoren oder autorisierte Benutzer können sie bearbeiten und der KI Feedback geben“ einfacher zu schreiben als zu tun.
Meine Art zu schreiben ist manchmal schwer für eine KI, die das beste Englisch kennt. Ich versuche, die englische Struktur richtig zu halten, aber wie und in welcher Reihenfolge ich Orte und Zeiten verwenden soll, ist etwas, das ich nicht kann. Wenn eine KI in eine Situation gerät, in der ich Finnisch mit englischen Wörtern schreibe, korrigiert sie mich manchmal völlig falsch und verfehlt oft den Kontext und den Punkt.

Ich meine, welche Möglichkeiten hat eine KI, wenn sie einen Satz bekommt, der nur aus Hieroglyphen besteht, also Smileys und Reaktionen? Oder wenn ein Thema nur ein Titel ist? Die Klassifizierung solcher in die richtigen Kategorien und Tags ist für eine KI nahezu unmöglich.

KI funktioniert gut, wenn ihre Erfolgsquote bei 85-90 % liegt und die Behebung der restlichen 10-15 % nicht zu viel kostet. Das ist akzeptabel. Aber wenn ein Moderator so viele Fehler macht, wird der Admin das Moderationsteam ziemlich schnell austauschen. Gleichzeitig bedeutet das, dass von 1000 Beiträgen 100-150 in der falschen Kategorie mit falschen Tags sind und die Titel nach harter Halluzination sind.

Chat GPT ist ein teureres KI-Tool als jedes, das wir in Foren verwenden. Es gab eine Lösung für eine Frage zu Varnish Cache. Es sah richtig aus, funktionierte aber nicht. Ich habe Chat GPT überhaupt erst um Hilfe gebeten, um Zeit zu sparen, weil ich zu faul war, die benötigte If-Struktur selbst zu schreiben.

Der Grund war, dass Chat GPT den Unterschied zwischen County-Code (Landkreis-Code) und Country-Code (Ländercode) nicht erkennen konnte. Das Chatten mit Chat GPT und anschließende Beheben des Problems dauerte länger, als wenn ich es von Grund auf selbst gemacht hätte.

Warum ich es benutze? Wegen dieser 85%igen Erfolgsquote.

Aber wenn es nicht sagen kann, wie viele R’s in dem Wort Strawberry (Erdbeere) sind, möchten wir es gerne mit Wörtern und Kontexten arbeiten lassen - weil es das meistens kann. Aber wenn es fehlschlägt und es einen Massenjob macht… kann und wird die Behebung ziemlich anspruchsvoll sein, weil wir auch andere Technik haben.

KI hat meine Zusammenfassungen durcheinander gebracht und übersetzt gleichzeitig. Einfach peasy, diese Datensätze zu löschen. Aber das Erstellen neuer kostet mich 100 Dollar. Was wäre, wenn es alle Themen in falsche Kategorien mit falschen Tags einordnen würde, und das würde es tun, wenn es möglich wäre? Behebbarer, aber kostspieliger Fehler.

KIs sind noch nicht so weit, wenn überhaupt, dass sie „alles“ könnten. Das ist mehr oder weniger Science-Fiction. Aber sie können einige Jobs erledigen, wenn es Grenzen und gut strukturierte Richtlinien gibt, relativ gut. Aber mit einer trüben Realität umzugehen… nein.

Ich mag die Idee eines kategorielosen Forums, in dem Tags logisch auf den menschlichen Bedürfnissen basieren, um Informationen zu finden, und alles automatisiert ist.
[/quote]

Ich stimme dem zu, was du geschrieben hast, dann lass uns KI entwickeln und sie wie einen Agenten laufen lassen und die KI Vorschläge zu geöffneten oder bearbeiteten Themen machen lassen. Zum Beispiel geeignete Kategorien, Tags usw. für ein geöffnetes Thema. Wenn die einzige Änderung, die vorgenommen werden muss, darin besteht, sie mit einem Button zu bestätigen und das Thema sofort aktualisiert wird. Wenn nicht, bearbeite es und genehmige es schnell.
Dies ist wahrscheinlich eine zusätzliche Ausgabe, aber es kann ein gutes Werkzeug für Administratoren sein, die ihre Arbeit erleichtern und die menschliche Kontrolle nicht aufgeben wollen. Eine KI, die die Aktivitäten im Forum überwacht und den Administrator oder die Personen in der ausgewählten Gruppe darüber informiert. Hmmm, das scheint keine schlechte Idee zu sein (ein bisschen abseits des Themas natürlich).

Du kennst deine Community besser als ich. :person_shrugging:

Dann soll die KI das vielleicht tun, während der Benutzer das Thema erstellt?

Ich mache das normalerweise, indem ich eine einfache PHP-Seite ausführe, die ich vorbereitet habe, wenn ich eine Frage habe, die mich interessiert. Wenn ich mich zum Beispiel für etwas wie „Was ist der Goldene Schnitt?“ interessiere, schreibe ich es auf die von mir erstellte Seite und sie interagiert mit KI und fügt die Website hinzu (außer der Kategorie). Mit anderen Worten, sie erstellt den Titel, die Frage und die Tags selbst. Das zeigt, dass KI in dieser Hinsicht tatsächlich erfolgreich sein kann.

z.B.: Profil - nuran-kilic - Soru Cevap

Vielleicht können wir solche Felder ausblenden (wir können einen einfachen Button für diejenigen hinzufügen, die bearbeiten möchten) und dem Benutzer erlauben, schnell ein Thema nur mit der Frage oder dem Themeneingabefeld zu erstellen. Wir können diese Felder später bearbeiten oder wir können es selbst mit einer einfachen WebSocket-Anfrage tun. Aber Discourse leistet großartige Dinge in der KI, es würde uns nicht überraschen, wenn es diese Art von Unterstützung hätte.

Vielleicht komme ich mit besserer Planung und Überlegung zurück, ohne zu sehr vom Thema abzukommen. Danke, dass Sie geduldig mit mir waren :slight_smile:

Warum nicht einfach den Wikipedia-Artikel lesen, der es der KI ermöglicht, eine nicht so gute Antwort zu erstellen?

1 „Gefällt mir“

Erfolg ist eine Frage der Definition und nicht dasselbe wie die Fähigkeit, etwas zu tun.

Um beim Thema zu bleiben, irgendwie, für mich ist die Erfolgsquote bei der Identifizierung von Spam null oder sehr hoch, je nach Definition. Sie ist null, weil alles, was sie fand, Falschmeldungen waren. Sie ist sehr hoch, weil alles andere, was sie nicht als Spam meldete.

In beiden Fällen hat sie die Fähigkeit, etwas zu tun.

Dasselbe wird passieren, wenn KI ein Thema klassifiziert. Und, das ist reine Meinung, sie schreibt fast nie gute genug Artikel, um sie zu veröffentlichen.

Wir haben es vor KI so gemacht, aber hier geht es um meine Idee, künstliche Intelligenz effektiver in Diskurs-Systemen einzusetzen. Du hast großartige Arbeit geleistet, es ist nicht möglich, es für jeden individuell anzupassen, deshalb können wir ein Plugin erstellen. Ich werde mich kurz beschweren, ich versuche seit 3 Tagen, die Diskurs-Entwicklungsumgebung einzurichten, es wäre großartig, wenn jemand aus der Community eine gute Installationsanleitung dazu erstellen könnte :slight_smile:

Als ich das letzte Mal nachgesehen habe, waren die Skripte in diesen Anleitungen veraltet. Eine Entwicklungsumgebung auf dem neuesten Stand zu halten, ist nicht einfach.

Der empfohlene Weg scheint die Docker-Entwicklungsversion zu sein, aber damit hatte ich auch nicht viel Glück. Ich bin mir nicht im Klaren, wie die Leute das machen.

1 „Gefällt mir“

Ich werde es ausprobieren, wenn es mir gelingt, werde ich es teilen. In der Cloud konnte ich es nicht zum Laufen bringen, es funktioniert und stürzt ab. Ich werde es lokal (Windows) versuchen. Irgendwann werde ich mir auf jeden Fall Zeit dafür nehmen. Wenn es jemand vor mir schafft, würde ich mich freuen :slight_smile:

Gibt es eine Möglichkeit, eine Liste bestehender Themen in einer bestimmten Kategorie einzustufen?

Ein Beitrag wurde zu einem neuen Thema aufgeteilt: Beiträge „live“ ausblenden, wenn die Automatisierung sie ausblendet