현재 AI 팀은 주제 목록에 대한 짧은 요약 생성을 실험하고 있습니다.
사람들이 주제를 어떻게 인식하는지에 대해 더 이해하고자, 다음과 같은 질문들에 관심을 가졌습니다…
Meta와 여러분이 속해 있을 수 있는 공개/비공개 커뮤니티의 맥락에서 자유롭게 생각해 주세요
주제 목록을 볼 때 여러분에게 가장 중요한 것은 무엇인가요? 어떤 요인이 특정 주제를 클릭하게 하고, 어떤 요인이 클릭하지 않게 하나요?
커뮤니티에서 어떤 일이 일어나고 있는지 파악하기 위해 주제 목록을 얼마나 자주 훑어보시나요? 그냥 계속 스크롤만 하시는 경우도 있나요?
최신, 인기, 핫, 안 본 글 등 다양한 주제 보기 방식을 얼마나 자주 전환하시나요? 이유는 무엇인가요?
같은 순서로:
당연한 말을 하는 것 같지만, 저는 질문의 답을 찾을 때 주제 목록을 훑어보지 않습니다. 그런 경우에는 Discourse 검색이나 브라우저의 검색 기능을 사용합니다.
제목에 물음표가 있으면 클릭하게 되는 것 같습니다 
일반적으로 저는 제가 답변할 수 있는 질문이나 읽을 가치가 있는 주제에 관심을 가집니다. 결국 제목을 바탕으로 주제를 요약해보는 것입니다.
Meta 포럼에서는 제목에 충분한 정보가 포함되어 있어 무엇을 클릭할지 결정하기 쉽습니다. 제목이 명확하고, 해당 주제에 대해 꽤 깊은 지식을 가지고 있기 때문입니다.
다른 포럼을 예로 들면, "과제 2 관련 문제"와 같은 제목은 판단할 단서가 별로 없습니다. 이런 경우에는 AI가 생성한 요약이 유용할 것입니다. 사실 저는 현재 주제에는 관심이 있지만, 최신 주제 페이지가 전혀 흥미롭지 않은 포럼에 있습니다. 붙잡을 만한 정보가 부족합니다.
정기적으로 방문하는 포럼에서는 “마지막 방문” 부분을 넘겨보는 일이 드뭅니다. 정기적으로 방문하지 않는 포럼에서는 검색 결과의 첫 페이지를 넘겨보는 일이 드뭅니다.
저는 항상 최신 보기(Latest view)를 사용합니다. 포럼 전체에 대한 최신 보거나, 특정 카테고리만 관심 있는 포럼의 경우 카테고리별 최신 보기를 사용합니다. 인기/최고(Hot/Top) 보기는 저에게 다소 과장된 느낌(hype)을 줍니다. 안 본 것(Unseen)은 지나치게 복잡해 보입니다. 하지만 이것은 별개의 주제라고 생각합니다.
Meta와 다른 커뮤니티에서는 제가 이해할 수 있는 주제에 한해 제한된 범주에 머무는 경향이 있습니다. 예를 들어, 새로운 토픽 목록에서 30개의 새 토픽 중 8개만 클릭할 수도 있습니다.
새 토픽을 클릭하지 않는 또 다른 이유는 이미 해결된 토픽인 경우입니다. 해결된 토픽을 찾으려면 검색을 이용합니다.
마지막으로 제목의 명확성입니다. 하지만 때로는 토픽의 내용이 명확하지 않아도 제목의 표현 자체에 호기심이 생겨 클릭하기도 합니다. 제가 도움이 될 수 있을 것 같은 토픽을 찾는데, Meta의 경우 주로 지원 관련 토픽입니다.
때로는 흥미를 느낄 만한 다른 토픽을 찾아보기 위해 훑어보기도 합니다. 그래서 빠르게 훑어보는 것은 하지만, 단순히 "계속 스크롤"만 하는 것은 아닙니다.
저는 ‘최신’ 보기를 고수합니다. 제가 가장 편하게 사용할 수 있는 방식이기 때문입니다. 다른 보기들은 크게 관련이 없습니다. 예를 들어, 토픽이 '최고’에 오른다고 해서 저에게 흥미로울 것이라고는 생각하지 않습니다.
다음은 내가 싫어하는 점이자, AI가 도움을 줄 수 있는 부분입니다. 바로 "새로운 문제"나 “도와주세요”, "아니 또 이러네"처럼 아무 내용도 담고 있지 않은 제목들입니다.
(저는 AI를 사용하지 않지만, 첫 번째 게시글에서 가져온 꽤 길이가 있는 스니펫과, 이미지가 있을 경우 그 섬네일을 포함하는 토픽 목록 미리보기 컴포넌트는 사용하고 있습니다.)
Meta나 Intfiction 디스코르스 포럼에서 한동안 확인하지 못했던 포럼의 동향을 파악하기 위해 둘러볼 때, 저는 Top/Hot 탭으로 가서 가장 많은 답변이 달린 토픽을 확인하는 것을 좋아합니다(하트 수를 볼 수 있다면, 가장 많은 하트를 받은 토픽도 클릭할 것입니다). 이를 통해 현재 가장 흥미로운 대화들이 무엇인지 파악하려고 합니다.
내가 일반 사용자인 커뮤니티에서는 대부분 제목과 카테고리로 판단합니다.
내가 모더레이터로 활동하는 '내 커뮤니티’에서는 아마도 전체 토픽의 60~80% 정도를 읽거나, 적어도 훑어봅니다. 토픽을 건너뛸 때는 보통 a) 최근에 해당 토픽을 확인해 봤는데 내게 특별히 흥미롭지도 않고, 지나치게 뜨겁게 논쟁이 벌어지는 것도 아니거나, b) 잡담성 콘텐츠가 많은 카테고리 중 하나에서 올라온 경우입니다.
불행히도, AI 요약은 이 두 가지 경우에 크게 도움이 되지 않을 것 같습니다. 제 경우, AI 요약은 매우 긴 토픽이나 게시글이 많은 토픽을 읽기 시작할 때, 혹은 게시글 자체의 길이가 꽤 길 때에야 비로소 활용하게 됩니다.
사람마다 주제 탐색 방식이 다른 것 같습니다. 특정 카테고리/태그/뷰에 머무는 것, 특정 주제를 검색하는 것, 여기저기 클릭해 보는 것, 요약 기능을 사용하는 것, 제목을 평가하는 것 등 다양한 방식이 있죠.
익숙한 커뮤니티를 방문하는지와 완전히 새로운 커뮤니티를 방문하는지에 따라 콘텐츠에 대한 접근 방식(또는 가치 평가)이 달라진다고 생각합니다.
테스트 결과, 특히 제목이 좋지 않은 경우를 위해 주제 뷰에 표시되는 짧은 요약이 이 맥락을 제공하는 데 도움이 될 것으로 기대합니다.
더 많은 컨텍스트, 더 나은 LLM, 프롬프트 조정을 통해 시간이 지남에 따라 이 부분이 개선되기를 희망합니다.
생각을 나눠 주셔서 모두 감사합니다!
네, 감정 분석과 요약의 조합이 관리자에게 도움이 될 수 있다고 생각합니다. 하지만 꽤 정확해야 하고, 영어 이외의 언어도 지원해야 하며, 자체 호스팅 LLM과 함께 작동해야 합니다(평균적인 루트 서버가 대규모 추론에 충분한 AI 기능을 갖추게 되는 시점에 도달한다고 가정할 경우).