Em primeiro lugar, não criei nenhum deles, então só posso especular.
Sim.
Os poucos plugins do ChatGPT que experimentei leem o PDF inteiro, no entanto, muitos leem apenas o texto, pois extrair dados de expressões matemáticas e gráficos está além de sua capacidade. Isso ocorre porque um PDF é projetado para layout e apresentação, e não para extração de contexto ou para transmitir conhecimento como um formato de intercâmbio de dados.
Não tenho certeza do que você quer dizer com isso, mas, pelo que entendi, eles incorporam o conhecimento em um banco de dados vetorial e, em seguida, usam o prompt para selecionar as partes relevantes e compor uma resposta.
A analogia que uso para explicar a outras pessoas como entender o conceito é, em vez de focar na ideia de um PDF, pensar nas ideias que os autores do artigo estão tentando transmitir no artigo e que você está conversando com eles.
Se você puder executar plugins com o ChatGPT, neste site
https://pugin.ai/
pesquise por PDF ou paper e experimente alguns. As duas principais diferenças que encontro neles é que muitos lerão um único PDF (https://pugin.ai/p/chatwithpdf), enquanto este (https://pugin.ai/p/science) selecionará os artigos relevantes de 250 milhões de artigos científicos.
O LangChain tem isso
e existem repositórios semelhantes no GitHub (ref), sua experiência pode variar.
Aqui está um caso de uso específico para tal tecnologia para aqueles que pensam que ela se limitaria apenas a acadêmicos.
Aproveitando LLMs com Vastos Conjuntos de Dados e Guias de Mecânica