Habilitando o Bot de IA no Chat

Entendo, então focando aqui há… com um pouco mais de detalhes técnicos.

  1. Mencionar @gpt3.5-bot selecionaria a primeira persona priorizada… que geralmente seria o helper do fórum, mas você poderia mudar.
  2. Também forneceríamos contexto (digamos, 1000 tokens de mensagens de chat anteriores) para que ficasse alinhado. (isso é configurável ou não? configurável por persona ou não?)
  3. Precisamos claramente restringir o grupo de pessoas que podem @mention no chat, então precisaríamos de uma configuração do site para isso.
  4. Precisaríamos pensar sobre auditabilidade, um mínimo fácil aqui seria fornecer uma consulta no explorador de dados.
  5. Dadas as recentes refatorações de chat, podemos abrir discussões novas “ilimitadas” com um bot, então certamente poderíamos projetar algo lá.
  6. Se permitirmos @mention no chat… por que não permitir também em posts de fórum para o mesmo grupo? grupo diferente.

Considerando tudo isso… minha sugestão V0 seria:

  1. Adicionar configuração do site ai_bot_chat_enabled_groups
  2. Codificar 1000 tokens de contexto por enquanto - escolher a primeira persona priorizada
  3. Fazer apenas o suporte a @mention para V0

V1

  1. Suporte a streaming e cancelamento

V2

  1. Adicionar suporte opcional para “DMs em grupo com bots de IA”
  2. Garantir que também tenhamos uma interface agradável para encontrar todas essas coisas e minimizar a sobrecarga de fazer isso.

V3

  1. Opcionalmente, permitir que as personas também criem um usuário dedicado com um avatar dedicado. Então você pode interagir com vários bots no chat. Neste modo, a persona também teria um usuário/modelo selecionado.
  2. Mover também alguma configuração para a interface da persona… qual persona está habilitada para chat?

V4

  1. Pensar em limites - uso máximo de tokens por dia por usuário, coisas assim

V5

  1. Pensar em adicionar parte disso também em tópicos padrão - (precisa de configuração do site, etc…) por exemplo: @summary_bot resuma este tópico até agora

No geral, gosto de muito disso, só preciso descobrir como alinhar essas coisas em nosso roadmap.

8 curtidas