Feedback sul riepilogo giornaliero

Totalmente fuori tema, ma vedo uno schema qui. Più quelli legati alla cultura anglosassone chiamano l’IA un uomo. E quelli provenienti da diverse famiglie linguistiche e culturali vedono l’IA come una donna.

Bene… se cambiate quel nome, potrebbe iniziare a comportarsi e non essere così arrabbiata tutto il tempo :wink:

Gli ho dato un’altra possibilità. Ha deciso di non includere i link questa volta. :person_shrugging:

1 Mi Piace

Devo dire che a questo punto non è più un riassunto… Non credo che al momento renda bene il concetto di highlights.

5 Mi Piace

Mi sto preparando per un altro tentativo con il prompt.

Sto pensando: “Bert, rendilo più completo e includi i tuoi pensieri per espandere gli argomenti che ti è particolarmente piaciuto leggere”.

2 Mi Piace

Raccomandazione

Avere una quarta regola di automazione da usare per i test, che ti invii un messaggio privato solo a te stesso.

Rende il ciclo di feedback molto più breve, puoi eseguire 5-6 iterazioni in pochi minuti.

Il problema che sto riscontrando è che produce un risultato decente e poi si degrada nel tempo basandosi sullo stesso prompt. Non sono sicuro di come compensare.

1 Mi Piace

Risultato discreto e costante nei test? Non sono sicuro, ma forse ridurre la temperatura o top p potrebbe aiutare qui, pensavo di averlo quasi a zero.

Gli ultimi due sembrano molto più vicini a quanto inteso, quindi non sono sicuro di cosa si possa cambiare per farlo aderire più coerentemente allo script. Posso provare una quarta automazione e test rapidi, ma se 5 escono bene e i successivi 5 non così bene, allora non sono sicuro al 100% quali leve posso tirare per migliorarlo. Non ho molta familiarità con la scrittura di prompt AI, quindi questo giocherà un ruolo. Inoltre, non sono sicuro di come decida cosa è “interessante” e se sia solo un po’ casuale.

Ho provato a creare un report di coinvolgimento:

argomento Visualizzazioni Mi piace sull’argomento In visione In monitoraggio Silenzioso manualmente
Riepilogo giornaliero (21:00 UTC) (9) 331 4 1 5 11
Riepilogo giornaliero (5:00 UTC) (10) 395 5 1 5 13
Riepilogo giornaliero (13:00 UTC) (10) 391 2 1 6 12
Riepilogo settimanale (2) 108 5 2 4
1 Mi Piace

Non ho idea di come funzioni GPT (direttamente o tramite API). I prompt di sistema sono davvero difficili per me, e usare l’inglese in modo creativo non lo rende più facile. A causa di queste e altre cose, non ho aspettative troppo realistiche su ciò che GPT può fare. Quindi sono come GPT in questa materia: nessuna conoscenza, leggo articoli facili da copiare e incollare dove non so affatto se i fatti siano minimamente attendibili e i vuoti li riempio con l’allucinazione. Ma ho molti, e intendo davvero molti test e tentativi che mi sono costati troppi soldi.

Basta così per la dichiarazione di non responsabilità?

Affermo che GPT ha una memoria più lunga di quanto dovrebbe. O la metto così: dipende, non so, da quanti utenti ha OpenAI. O da quanto si è vicini all’uso del limite. Ma sicuramente il GPT-4 fresco ricorda molto più a lungo di quanto dovrebbe. La linea GPT-3.5 non tanto e affermo che i modelli 3.5 sono stati lobotomizzati di recente a favore del 4.

E voi farete un passo avanti e direte che dovrei lasciare stare gli adulti e lasciare che abbiano la loro conversazione perché non state usando GPT di OpenAI :rofl:

Ma ogni volta che faccio iterazioni cambiando un po’ il prompt e iniziando nuove conversazioni ottengo risultati simili: prima vicini o totalmente ciò che volevo, e poi ha iniziato a fallire.

Poi ho iniziato a fare cose un po’ diverse e sono riuscito a ottenere risposte che non sarebbero state possibili a meno che GPT non avesse una memoria più lunga. Certo, c’è una forte possibilità che io gli abbia effettivamente fornito falsi ricordi, o che non fossi intelligente come pensavo (di nuovo, l’inglese è difficile per me) e sia stata solo una fortuna o una coincidenza, ovvero. ciò che fa GPT.

Quindi ciò che voi chiamate degrado è in realtà una specie di frustrazione. Uno stupido umano fa la stessa domanda ancora e ancora e l’intelligenza intelligente che domina il mondo cerca di dare una risposta leggermente diversa tentativo dopo tentativo. Quindi, alla fine, non ha più argomenti interessanti da qui, perché li ha offerti tutti attraverso cicli di iterazione.

Il tuo Bert è solo davvero incazzato perché niente di ciò che ti offre è abbastanza buono e alla fine dice fottetevi ragazzi, vado a casa - beh, è un tipo educato quindi non usa esattamente quelle parole, ma il tono è lo stesso.

TLDR; le iterazioni possono sprecare possibilità perché non c’è una quantità infinita di argomenti nuovi e interessanti (non importa se gli sviluppatori dicono che non è possibile; quei ragazzi non possono leggere gli umani, quindi non sono del tutto sicuro che capiscano l’IA meglio :rofl:)

Non lo so, inizio a sentirmi piuttosto infastidito da questo bot. Generalmente apprezzo molto che ci sia più sperimentazione di prodotto unita al feedback degli utenti. Ma questa funzionalità è così sperimentale in questo momento, che sembra quasi non consensuale essere menzionati costantemente da questo bot. E dover silenziare l’utente di sistema per non partecipare a questo non sembra il modo giusto per uscirne.

Preferirei molto se questo potesse essere implementato in un modo meno invadente di come è ora.

1 Mi Piace

Penso che dovresti essere in grado di silenziare gli argomenti piuttosto che l’utente @Discourse se volessi disiscriverti, ma penso che l’idea che fosse un’adesione fosse più allettante.

1 Mi Piace

Continuando la discussione da Daily Summary (5am UTC):

Quindi ho visto questo argomento: Daily Summary Feedback, che sembra parlarmi dei ping di link nella categoria.

Ho notato che ho ricevuto tre ping di link di seguito da questo argomento:


Mi chiedo perché sono stato pingato tre volte dal riassunto AI.

Se controlli uno qualsiasi degli OP degli argomenti di riepilogo, c’è anche una spiegazione. :+1:

2 Mi Piace

Ne abbiamo già discusso

2 Mi Piace

Questi sono riassunti utili, mi piacciono.

Qualcuno lo legge effettivamente a scopo informativo? La mia opinione è che sia troppo specifico. Sarei più interessato a riassunti di livello superiore. Come un riassunto settimanale che prende tutti quelli giornalieri e sintetizza tutto il contenuto a un livello superiore.

Ad esempio, invece di “questa persona ha informato quella persona riguardo a un bug”, forse “11 nuovi bug segnalati questa settimana Bug

O qualcosa come “l’IA è stato l’argomento più discusso questa settimana con il rilascio di un nuovo plugin [url]”

2 Mi Piace

Penso che dovremmo ridimensionare questo a 1 al giorno. I tre al giorno per cercare di tenere conto dei diversi fusi orari non sembrano valere i compromessi in questo momento.

Se vogliamo davvero qualcosa del genere, penso che abbiamo bisogno di una persona bot AI invece, e le persone possono chiederle cosa è successo dall’ultima volta che hanno visitato e di, “oh, per favore portami un caffè con le notizie, vuoi?”

5 Mi Piace

In realtà… mi piace l’idea del maggiordomo. E se si giocasse di più a questo gioco mentale, ancora meglio se funzionasse in modo simile a discobot, o se potessimo avere un link simile da inserire nei menu.

Ho bisogno del mio report alle 8:00, @pmusaraj ama il suo report al mattino.

Prima di buttare il bambino con l’acqua sporca, quali sono i problemi reali aperti?

  • Le persone devono disattivare attivamente l’audio, invece di partire disattivate
  • Link spazzatura negli argomenti
  • Notifiche spazzatura

Posso pensare a soluzioni per tutti questi problemi, specialmente se siamo disposti a nascondere questi report agli anonimi per ora.


Un esempio di soluzione completa che lo rende facoltativo:

  • Crea 3 categorie sicure per i 3 report
  • Permetti alle persone di unirsi liberamente a 1 dei 3 gruppi sotto cui sono protetti i report
  • Aggiungi una nuova estensione markdown ?silent=true alla fine dell’URL significa, nessuna notifica, nessun argomento collegato. (che è generalmente utile comunque)

Problema risolto?

4 Mi Piace

Non ho opinioni molto forti a riguardo, ma sto cercando di immaginare dove questo possa finire e al momento ho difficoltà a immaginare qualcosa di molto elegante.

Certamente non sto sostenendo di rendere le cose più complesse in questo momento.

Hai già in mente qualcosa su dove questo possa finire?

1 Mi Piace