AI 페르소나에서 포럼 주제 내 PDF 파일 검색 지원 추가

기여 기능
1

현재 한계:
• 포럼 의미 기반 검색은 게시물 텍스트만 인덱싱하며 PDF 첨부 파일은 포함되지 않음
• PDF 파일은 /search AI 토글을 통해 검색할 수 없음
• 이 문제를 우회하기 위해 PDF를 별도로 persona RAG에 수동으로 업로드해야 함

제안된 해결책:
• 임베딩 생성 시 PDF 첨부 파일에서 텍스트 추출
• 게시물 텍스트와 함께 PDF 내용을 인덱싱
• PDF가 첨부된 주제를 의미 기반 검색으로 발견 가능하게 만듦

장점:
• 사용자가 포럼 검색을 통해 기술 문서를 찾을 수 있음
• 내용 중복(포럼 게시물 + RAG 업로드)이 불필요함
• 더 나은 SEO(인덱싱된 주제에 첨부된 PDF)
• 더 단순한 아키텍처(Search 명령어가 자연스럽게 작동)

이 기능을 구현하게 된다면, 저는 다음과 같은 작업을 수행할 수 있을 것입니다:

  1. 강제 도구 제거 (Search가 자연스럽게 PDF 내용을 찾음)
  2. RAG 업로드 완전 제거 (모든 것이 포럼 주제에 포함됨)
  3. 시스템의 상당한 단순화
1개의 좋아요
2

여기에는 #ai-search를 위해 파일 인덱싱에 관한 유사한 주제가 있습니다: Index File Contents for Search

2개의 좋아요
3

플러그인이 조리된(post) 게시물에 텍스트를 선택적으로 숨겨진 details 요소에 추가할 수 있다고 생각합니다. 그렇게 하면 텍스트가 검색될 것이라고 생각합니다. 자가 호스팅(self-hosted) 환경이라면 개발 비용은 대략 수백 달러 수준이 될 것입니다. 아니면, 해당 업체가 관심 있어 보인다면 테스트 등을 포함하여 약 두 배의 비용으로 PR(Pull Request)로 제출하는 것도 방법입니다.

4

참고로, PDF 파일을 페르소나에 업로드하면 AI 지원 검색에서 ‘일반적인’ 포럼 콘텐츠를 찾지 못하는 문제가 발생했습니다. 따라서 (a) 주요 문서를 마크다운으로 변환하여 바로 주제(topic)로 게시하거나, (b) PDF 파일과 함께 포럼에 게시하면서 주요 키워드/목차 등을 추출해 함께 올리는 방식으로 대응하고 있습니다. 또한 안정성을 위해 GPT 4.1에서 Sonnet 4.5로 전환하고 HYDE를 비활성화해야 했습니다.

1개의 좋아요