Resumos de IA estão disponíveis há algum tempo. Vimos alguns feedbacks iniciais, mas queríamos revisitar a discussão. Como estamos pensando em investir no desenvolvimento futuro de Resumos de IA, estou tentando entender o feedback dos usuários, começando por nós aqui na Meta.
Você está usando Resumos de IA aqui e em suas comunidades?
Sim, o tempo todo
Às vezes, dependendo do tópico
Não, não é útil para mim
0voters
Feedback
Sinta-se à vontade para expressar sua opinião e ser honesto. Algumas perguntas orientadoras que me interessam saber…
Com que frequência você o está usando?
Quão útil é o resumo gerado? você o considera preciso em relação ao que leu?
Eu diria “não”, mas acho que a linguagem na enquete é um pouco presunçosa. Não é uma decisão consciente da minha parte. É mais que, no contexto em que poderia ser útil, eu ainda não pensei organicamente “ah, sim, eu deveria usar a sumarização de IA”.
idioma; o inglês não é um idioma funcional no meu fórum, mesmo que praticamente todos possam lê-lo
Não consigo ajustar o prompt do sistema, porque agora ele é com frequência muito longo, alucinado e/ou contém coisas irrelevantes
No entanto, posso contornar a barreira do idioma. Pedirei a um GPT que usa o mesmo modelo que resumir algo em finlandês, voltarei e agora, se eu gerar um resumo, ele será em finlandês.
Eu o uso uma vez a cada poucos dias. Como moderador, leio todos os tópicos. No entanto, os resumos nem sempre são úteis para mim, mas são criados para outras pessoas.
Às vezes muito útil, outras vezes ele perde informações críticas. Os resumos às vezes trazem o ruído em vez do sinal. Se eu realmente preciso de informações, não confio nos resumos para me ajudar a decidir, leio o tópico inteiro, pois pode haver um diamante bruto e o resumo o perderá.
Eu costumo usar resumos baseados em GPT-4 e, como eles atualizam os modelos periodicamente, há instâncias em que parece que o modelo de linguagem está lutando para compreender o tópico.
Nem sempre. Como leio muitas postagens, muitas vezes quando volto a uma postagem, me encontro no final do tópico em vez do início, onde está o botão. Isso muitas vezes me obriga a rolar até o topo para acessar o botão. Seria mais conveniente tê-lo também localizado na parte inferior.
Gostaria de algo mais criativo (não linear) para chamar a atenção, como contar uma história em 1/5 mensagens e/ou pedir feedback usando enquetes para engajamento.
Às vezes, escolher tópicos únicos usando análises (alternando entre os X principais mais populares*, por visitas, curtidas).
Com esses recursos, acho que poderia substituir o e-mail enviado pelo Discourse, dando uma renovada nesse recurso também.
Não respondi à enquete, porque minha resposta é diferente. Não sei quanto custará conectar meus fóruns a uma API de IA e não pesquisei sobre isso. Quando pesquisei sobre tradução, era muito caro, então estou assumindo que isso também pode ficar caro.
Não usei aqui, porque os tópicos não são longos e geralmente estou procurando algo específico.
Eu tenho uma abordagem para analisar tópicos longos que funciona para mim:
Sou muito bom em leitura dinâmica
Acho o botão “(n) posts no tópico” que está no cartão do usuário super útil
Em geral, acho o texto gerado por IA desagradável.
Tenho certeza de que usaria resumos de IA em um aperto. Exceto por clicar no botão por curiosidade, essa situação ainda não surgiu.
O que eu realmente gostaria de ver é um mecanismo para limitar o número de posts e usuários em um tópico. Se isso fosse feito, haveria menos necessidade de resumos gerados por IA.
Uma das minhas esperanças para a integração do Discourse AI é que ela permitirá que as conversas ocorram de maneira natural e humana, ao mesmo tempo em que permite que um fórum funcione como uma base de conhecimento para usuários que não acompanharam a conversa completa. A pesquisa semântica (especialmente ao pesquisar dentro de um tópico) ajudará nisso. Outra abordagem seria usar resumos de tópicos gerados por IA para dividir um tópico em assuntos.
Para tópicos que tenham um número suficiente de postagens, o resumo poderia delinear o OP (tópico original), e então ter uma seção de “assuntos discutidos neste tópico”. De maneira semelhante a como clicar no botão “(n) posts no tópico” no cartão do usuário extrai as postagens desse usuário do tópico completo, cada assunto discutido poderia ter um botão que permitisse que a sub-conversa fosse extraída do tópico completo.
Isso também pode ser útil para moderadores que desejam separar tópicos longos em vários tópicos.
Note que isso é menos testável no Meta do que costumava ser. Um esforço foi feito nos últimos anos para manter os tópicos relevantes para o OP.
Contexto
Feedback
