Pesquisar/Ler Privado não funciona para uma busca RAG orientada por Persona em fóruns?

Bug
1

Tenho tentado configurar um chatbot para responder a perguntas em alguns dos nossos fóruns privados, mas ele só parece encontrar resultados dos tópicos do fórum se eu tornar os fóruns públicos. Eu tentei definir “Read Private” (Ler Privado) e “Search Private” (Pesquisar Privado) na Persona - e configurei os “allowed groups” (grupos permitidos) da pessoa para os grupos de idade da segurança da categoria? Você consegue pensar em mais alguma coisa que eu deva tentar?

2

O usuário que inicia a conversa com a Persona tem acesso às categorias privadas?

1 curtida
3

Sim. Os tópicos estão em uma subcategoria - então testarei novamente com a categoria principal (ambas são privadas) caso seja um problema de subcategoria.

4

Acabei de verificar e tenho o mesmo problema se eu postar o tópico diretamente no fórum pai. Funciona bem se eu tornar esses fóruns públicos.

5

Você pode recriar isso com sua configuração?

6

Uma maneira interessante de depurar isso é ativar a depuração de IA. Quando você a ativa, verá um botão (I), você pode confirmar que, ao clicar nele e analisar o grande bloco enviado para o LLM, o conteúdo privado não é encontrado?

Nosso motor passa o usuário para o backend de pesquisa (o usuário que inicia a conversa com o bot)

2 curtidas
7

Olá @sam,

Obrigado pela dica de depuração - eu não tinha investigado isso antes!

Consigo ver várias mensagens sendo enviadas para o LLM, mas nada que me ajude a entender por que a “busca privada” não está funcionando. Parecem haver 2 “pares” de mensagens - 1 par para a busca real e outro par para o “titlebot” (que simplesmente deriva um título do resultado da busca).

Pelo que pude perceber, a primeira mensagem de busca é para o Dall-E (não tenho certeza por quê?), então isso não parece relevante (por favor, confirme), mas a segunda mensagem se parece com isto - sem mais nada aparecendo depois. Presumo que isso signifique que não está encontrando nada?

1:

    • role: user

    • name: NeilEvans

    • content: O que é Q03-DZN00-00000?

  • stream: true

Agradeço antecipadamente pela sua ajuda?

N

8

Acho que fiz algum progresso - não estava usando a persona que eu pretendia, então estava usando por padrão outra persona que tinha “bot” ativado. Desativei o “bot” para as outras personas agora, então está usando a persona que eu queria.

Continuarei investigando…