이것이 실제 지원 질문인지 모르겠지만, 스태프가 어떻게 해야 하는지 알고 있을 겁니다.
채팅에서 AI 봇에게 오늘 핀란드의 달의 위상이 무엇인지 물었습니다. 봇은 올바르게 답변했습니다. 그 다음 핀란드에서 다음 보름달이 언제인지 물었습니다. 봇은 2023년 10월 28일이라고 확신에 차서 답변했습니다.
하지만 현재 날짜를 확인하고 최근 답변을 재검토해 달라고 하자, 2024년 7월 28일이라는 올바른 답변을 내놨습니다.
하지만 이번이 처음은 아닙니다. 제 추정 통계에 따르면, 현재 날짜에 대한 지식이 필요한 요청의 경우 10번 중 8번은 비슷한 오류를 범합니다. 그러나 이것은 채팅에서만 발생합니다. DM이나 토픽에서 대화할 때는 일어나지 않습니다.
그리고 이것이 순수한 지원 질문이 아닌 이유 — 채팅봇도 비슷한 방식으로 작동합니다. 이 두 AI 솔루션은 실제로 시스템 프롬프트가 매우 다릅니다. 하지만 DAI가 언급하는 페르소나가 포럼에서 유효한 것과 정확히 동일한 시스템 프롬프트를 따르는 것은 아니라고 생각합니다. 이 추측은 PM/토픽에서 생성하는 것과 여러모로 다른 채팅봇의 답변에서 나온 것입니다.
그래서 여기서는 무슨 일이 일어나고 있는 걸까요? 채팅은 OpenAI의 지시사항과 무관하게 다른 API를 사용해서 채팅을 하는 건가요?