감사 로그를 확인했는데 빈 응답이 반환되었습니다. 규칙을 다시 트리거했는데 이번에는 정상적으로 작동했습니다.
5개의 좋아요
안녕하세요,
이 문제를 어디에 보고해야 하는지, 혹은 보고할 가치가 있는지 확실하지 않지만, Discourse의 AI 요약 기능이 꽤 자주 환각(hallucination)을 일으키는 것 같습니다.
예시:
토픽이 생성되었지만, 사용자들의 답변이나 상호작용이 없었습니다. 해결책에 대한 논의나 조사도 이루어지지 않았습니다. 게시물을 참고하세요.
그런데 봇은 자신감 있게 "몇 가지 옵션이 논의되었지만 확정적인 해결책은 나오지 않았다"고 주장합니다.
게시물에 답변이 없는 경우 요약을 임의로 생성하지 않도록 필터링할 방법이 없나요?
1개의 좋아요
‘버트가 환각을 멈추게 할 수 있느냐’는 의미라면, 그건 제가 일관되게 할 수 있는 일이 아닙니다. 
다만, 근본적인 도구들은 계속 개선되고 있으며, 정확도도 그에 따라 높아지고 있다고 생각합니다.
6개의 좋아요
결국 주제 요약 섹션에 주제 요약 병합을 적용할 계획입니다.
이렇게 하면 여러 문제를 해결할 수 있지만, 현재 도구로 신뢰성을 높이려면 비용이 크게 증가할 것입니다. 요약을 생성한 후 검증 라운드를 여러 번 실행해야 하기 때문에 비용이 매우 높아질 수 있습니다.
2개의 좋아요
Daily Summary (5am UTC) - #149 와 Daily Summary (5am UTC) - #148 에서 일부 주제가 오타로 잘못 표기된 것 같습니다. #contribute:site-feedback 대신 #site feedback로 적혀 있어 해당 주제에 링크가 부여되지 않았습니다. 또한 #dev:translations 대신 #contribute:translations로 표시되었고, #documentation:self-hosting 대신 #Self-hosting으로 입력되었습니다.
네, 이건 잘 알려진 문제입니다. 수동으로 수정하거나 프롬프트를 많이 조정해서 우회하는 데 시간을 들일 가치가 크지 않습니다. 
3개의 좋아요
버트가 또 잘못된 버섯을 먹었네요
5개의 좋아요
근데… 근데 그 토픽에 넌 아예 게시글을 올린 적도 없잖아 ㅋㅋ.
(그리고, 베르트와 버섯은 뭐야?)
버트는 일반적으로 메타의 AI 봇에 사용되는 별칭입니다.
1개의 좋아요
이것이 수정된 것 같나요? 그리고 원래의 몇몇 게시물과 동일한 형식으로 포맷되었나요? (이 게시물의 경우 그렇지만, 오후 1시 게시물은 카테고리가 수정된 것으로 보이나, 카테고리 항목이 굵게 표시된 첫 몇몇 게시물처럼 보이지는 않네요)
Claude 3.5 Sonnet으로 전환하여 품질이 조금 더 좋아졌습니다.
3개의 좋아요
AI가 ‘mention’ 클래스에 그것들(카테고리)을 넣는 것을 포기한 걸까요? 아니면 프롬프트가 변경된 건가요?
https://meta.discourse.org/t/daily-summary-5am-utc/291851/179?u=natedhaliwal
수정: 다음 게시물에서 스스로 해결된 것 같습니다.
AI가 같은 카테고리의 주제를 함께 묶지 않은 것 같습니다. 그래서 이 게시물에는 수많은 주제가 아무런 순서 없이 나열되어 있습니다.
(이 게시물이 여기에 속하는지 확실하지 않습니다)
https://meta.discourse.org/t/weekly-summary/291947/30?u=natedhaliwal
거의 맞습니다
아 진짜. @Moin이 첫 번째 건을 처리했고, 두 번째 토픽은 다른 내용이었잖아 ㅋㅋ
봇이 제가 Moin의 일을 하고 있다고 생각한 것 같아서 오히려 기뻐요. 
3개의 좋아요
이미 존재하는 요청이 있어 새로운 기능 요청을 한 것이 아닙니다. 그저 링크를 첨부한 것입니다. 이는 Support 채널에서 이루어진 내용입니다. 
1개의 좋아요
저는 그 토픽에 참여하지 않았습니다 
2개의 좋아요
아, 이제 봇이 나를 휴(Hugh)이라고 생각하는구나. 
3개의 좋아요
그것은 큰 실수를 저질렀다
5개의 좋아요