Ich folge hier nur, um anzumerken, dass die KI-Triage dank der Arbeit von @Roman zur Verbesserung der Prompts nicht mehr Folgendes benötigt:
3 „Gefällt mir“
Hallo zusammen! Dies ist eher ein Lob an euch, denn ich wollte euch zuerst für die hier bereitgestellten Informationen und die Beiträge, die ich zu diesem Thema durchsucht habe, danken.
Es lieferte dringend benötigten Kontext darüber, wie diese Arbeit implementiert wurde. Ich beschäftige mich derzeit mit der Messung und Identifizierung von Online-Toxizitätsmodellen in Unternehmen, sozialen Medien und insbesondere in kleineren oder wachsenden Gemeinschaften und habe viele Fragen, aber noch nichts Großes zu berichten.
2 „Gefällt mir“
Kurzes Follow-up – bedeutet das, dass die bestehenden Prompts, die bereits liefen, aktualisiert werden sollten?
2 „Gefällt mir“
Ja, bestehende Prompts sollten jetzt aktualisiert werden, um die Änderungen widerzuspiegeln.
2 „Gefällt mir“
KI-Triage ist fantastisch! Ich bin gespannt, wie weit wir damit über den klassischen „Bag-of-Words“-Algorithmus hinausgehen können. Der Post-Klassifikator ist eine großartige Funktion. Ich frage mich, ob es Pläne gibt, ihn mit der Post-Genehmigungs-Warteschlange zu verwenden. ( Beitragsanzahl genehmigen, genehmigen, es sei denn, Gruppen sind erlaubt).
Im Grunde also einen Klassifikator zu verwenden, nicht nur um ihn zur Überprüfung in die Warteschlange zu stellen, sondern um ihn automatisch aus der Warteschlange zu genehmigen oder abzulehnen. (Ich meine nicht die Bearbeitung von Flags, sondern nur Genehmigungen)
Ich sehe KI-Post-Triage und Post-Überprüfungswarteschlange als sich ergänzend an.
4 „Gefällt mir“
Um Tags hinzuzufügen oder Kategorien zu ändern, gibt es derzeit folgende Optionen (korrigieren Sie mich, wenn ich falsch liege):
- Der Benutzer verwendet den KI-Assistenten, um Tags und Kategorien aus dem Composer basierend auf Nearest-Neighbor-Embedding-Vektoren vorzuschlagen, indem er sie mit früheren Beiträgen vergleicht.
- Der Administrator richtet einen separaten KI-Beitragsklassifikator ein, der das Thema für jeden möglichen Tag und jede mögliche Kategorie durch ein LLM laufen lässt, das den Tag hinzufügt oder die Kategorie ändert, wenn die LLM-Ausgabe dies angibt. Er fügt keine willkürlichen Tags hinzu, jeder Klassifikator fügt nur einen bestimmten Tag hinzu, ja oder nein. Dies ist nicht nur umständlich einzurichten und zu warten, sondern auch teuer, da Sie alle ausführen müssen.
Was ich gerne hätte, ist ein Klassifikator, der eine Anweisung wie diese erhält:
Sie sind ein Tagging-Assistent für ein Forum. Das Forum handelt von X, Y und Z.
Ihre Aufgabe ist es, Forenbeiträge mit einem oder mehreren der folgenden Tags zu versehen:
- Ein Tag, der angibt, ob der Beitrag etwas verkauft oder etwas sucht. Tags: for_sale, wanted, advice
- Ein Tag, der die Art des Artikels angibt, um den es in dem Beitrag geht: cars, services, tickets, kids_stuff, home_and_garden, other.
Wenn Sie eine Nachricht finden, die NSFW ist, kennzeichnen Sie sie als NSFW.
Sie können auch Aktionen festlegen, um einen Beitrag zu moderieren.
Wenn Sie eine Nachricht finden, die zum Thema dieses Forums gehört, aber als anstößig angesehen werden könnte, setzen Sie die Aktion auf ‘flag’.
Wenn Sie eine Nachricht finden, die nicht zum Thema gehört, setzen Sie die Aktion auf ‘hide’.
Dies könnte dann von der großartigen neuen OpenAI structured outputs-Option begleitet werden, um eine JSON-Struktur zurückzugeben, die die hinzuzufügenden Tags oder die auszuführende Aktion angibt, die dann vom Klassifikator verarbeitet wird.
Ist so etwas auf der Roadmap und/oder ist ein PR willkommen? Oder wäre das Plugin-Territorium?
7 „Gefällt mir“
Ich denke, der sicherste Weg wäre, eine brandneue Automatisierung dafür zu definieren. Sie ist strukturell sehr anders als die aktuelle.
Ich denke, wir wären offen für einen gut getesteten PR für Discourse AI.
Beachten Sie, dass Completion Prompt in AI derzeit keine strukturierten Ausgaben unterstützt. Dieses Konzept müsste für OpenAI-Modelle hinzugefügt und implementiert werden. Wir haben eine Menge Modelle, viele davon haben keine native Unterstützung. Ich wäre offen für einen PR, nur um OpenAI-Unterstützung als Anfang bereitzustellen, solange es für Endbenutzer nicht verwirrend ist und wir ihnen erlauben, ein Modell auszuwählen, das die Funktion nicht unterstützt.
Es ist jedoch eine ziemlich große Änderung, aber wenn Sie sich mutig fühlen … legen Sie los.
Ich würde empfehlen, dies in mehreren PRs anzugehen, beginnend mit der Bereitstellung von Unterstützung für strukturierte Ausgaben für Completion Prompts (getestet).
9 „Gefällt mir“
Ich erstelle gerade eine Automatisierung zum automatischen Markieren von Beiträgen, kann aber keine Marke auswählen, die einer Markengruppe hinzugefügt wurde. Bitte lassen Sie mich wissen, ob es dafür Workarounds gibt. Ich möchte die bestehende Markengruppe beibehalten. Danke!
1 „Gefällt mir“
Hallo zusammen,
Verstehe ich das richtig? Wenn ich 50 Kategorien habe, werde ich KI-Triage verwenden, um Themen automatisch in diese Kategorien einzuteilen. Dazu benötige ich 50 eindeutige Automatisierungen?
Wird ein Aufruf an LLM nur dann erfolgen, wenn neue Themen für den ursprünglichen Beitrag erstellt werden? Es scheint, dass die KI-Nutzung für dieses Szenario nicht übermäßig ist.
Ich glaube, ich habe gelesen, dass jemand einen anderen Ansatz dafür in Erwägung zog, aber es handelt sich möglicherweise nur um eine Idee.
3 „Gefällt mir“
Ich denke, die Antwort auf meine Frage lautet: Es kommt darauf an, wie granular Sie automatisch kategorisieren möchten.
Vielleicht kann jemand beantworten, ob bei der Verwendung von Automatisierung zur automatischen Kategorisierung von Themen die Übereinstimmung mit dem Such-Eingabefeld Vorrang vor der Verwendung von KI hat?
Mit anderen Worten: Wenn ich Banane als Suchbegriff in der Automatisierung festlege und ein Benutzer ein Thema erstellt, das Banane im Beitrag verwendet, wird es übereinstimmen, keine KI wird aufgerufen. Kategorisiere als Banane.
Wenn der Benutzer ein Thema erstellt, das sich auf gelbe Früchte bezieht, die Affen essen, keine Übereinstimmung, die KI-Eingabeaufforderung wird ausgeführt und kann feststellen, dass diese Beschreibung eine Banane 
ist.
Für dieses Szenario wäre Banane auch eine vorhandene Kategorie.
1 „Gefällt mir“
Einiges davon knüpft an das an, was @RGJ besprochen hat, und an einige Ideen, die ich mit @Falco besprochen habe.
Ich bin dabei, zuzulassen, dass eine Persona als Agent fungiert. Dann könnte man den Agenten über Tools verschiedene Dinge für einen erledigen lassen, wie z. B. Themen kategorisieren und so weiter.
Die Mechaniken sind hier alle noch in der Schwebe, aber wir denken darüber nach.
50 Automatisierungen sind eindeutig eine schlechte Lösung.
6 „Gefällt mir“
Hallo
Kann AI Triage Suchen durchführen? Ich beabsichtige, eine Eingabeaufforderung zu verwenden, die Themen mit ähnlichen Titeln vermeidet, wenn das Erstellungsdatum des anderen Themas weniger als einen Tag alt ist. Ist dies mit AI Triage möglich?
1 „Gefällt mir“
Im Moment nicht, es klingt, als ob Sie “Agenten”-ähnliche Verhaltensweisen beschreiben. Das ist definitiv etwas, worüber wir nachdenken!
3 „Gefällt mir“
Wow, das funktioniert wie am Schnürchen!
Ich suche Rat: Was soll ich als Obergrenze für die Anzahl der Tokens festlegen? Dies ist für ein Forum mit wenig Traffic.
Hier zur Relevanz kopiert
1 „Gefällt mir“
Ich denke, diese Funktion muss verbessert werden. Ich erwarte, dass KI Themen automatisch kategorisiert und mit passenden Tags versieht. Im aktuellen Zustand ist sie nicht vollautomatisch (oder ich habe es nicht verstanden). Zum Beispiel müssen wir eine bestimmte Kategorie auswählen. Eigentlich haben wir KI, warum macht sie nicht alles? Es wäre eine große Bequemlichkeit für Benutzer und Administratoren. Wenn die Kategorien und Tags automatisch von KI organisiert würden, könnten wir sogar den Titel mit einbeziehen. So müssten Benutzer nur noch schreiben, was sie sagen wollen. Es würde uns Sekunden sparen und es wäre eine große Bequemlichkeit für die Benutzer.
[Zitat=“kuaza, Beitrag:50, Thema:281227”]
Eigentlich haben wir KI, warum macht sie nicht alles?
[/Zitat]
Die grundlegende Antwort ist, dass „alles“ für verschiedene Menschen unterschiedliche Dinge bedeutet. Standardeinstellungen helfen, aber ein Rezept zu finden, das perfekt für 99 % der Menschen passt, ist sehr, sehr schwierig. Alle Gemeinschaften sind etwas unterschiedlich.
3 „Gefällt mir“
Unser Ziel ist es, die Arbeit der Menschen zu erleichtern. Automatisieren wir das also, und wenn nötig, können Administratoren oder autorisierte Benutzer es bearbeiten und Feedback an die KI geben. Dieses Feature kann gleich bleiben, aber wir müssen über die vollständig KI-gesteuerte Bestimmung von Kategorien und Tags nachdenken.
Eigentlich erwarte ich, dass die Leute ganz einfach neue Themen erstellen können, wie hier https://ask.discourse.com/, und keine Zeit mit Kategorien, Titeln oder Tags verschwenden. Diese können später nach Belieben bearbeitet werden, aber wir müssen über die Vorteile nachdenken, die diese Bequemlichkeit den Benutzern bietet.
[Zitat=“kuaza, Beitrag:52, Thema:281227”]
und keine Zeit mit Kategorien, Titeln oder Tags verschwenden
[/Zitat]
Die Wahrscheinlichkeit, dass KI das gut kann, ist gering. Wenn die Person, die das Thema schreibt, nicht genug über die Community weiß, um zu wissen, in welches Thema es gehört oder was ein vernünftiger Titel ist, ist es unwahrscheinlich, dass sie etwas Wertvolles für die Community postet.
Wo hört es für dich auf? Warum sollten Benutzer überhaupt etwas schreiben? Sollte die KI nicht die Themen und die Antworten generieren?
2 „Gefällt mir“
Ich stimme den letzten Antworten zu, aber die automatische Kategorisierung könnte eine gute Funktion zum Experimentieren sein.
Vielleicht wäre eine Option zum Aktivieren/Deaktivieren der Funktion geeignet, um den unterschiedlichen Bedürfnissen verschiedener Leute gerecht zu werden, die Sam angesprochen hat.
Die UI/UX für die Auswahl der Kategorien ist für nicht-technische Benutzer schwierig. Niemand möchte durch Dropdown-Menüs scrollen und/oder Maus + Tastatur verwenden, sondern einfach tippen und ihre Nachrichten posten.
1 „Gefällt mir“