Я проверил журналы аудита, и они вернули пустой ответ. Я снова запустил правило, и на этот раз оно сработало.
Привет,
Не уверен, куда следует сообщить об этом или стоит ли вообще это делать, однако кажется, что функция суммирования Discourse AI довольно часто выдумывает факты.
Пример:
Был создан топик, не было ни ответов, ни взаимодействия от пользователей. Ни о каких решениях не обсуждалось и не исследовалось. См. сообщение.
Тем не менее, бот уверенно заявляет: «Некоторые варианты обсуждались, но окончательного решения не найдено».
Неужели нет способа отфильтровать это, чтобы, если у сообщения нет ответов, суммаризация не выдумывала факты?
Если вы имеете в виду «можете ли вы заставить Бёрта перестать галлюцинировать», то нет, я не могу это делать последовательно. ![]()
Однако, я думаю, что базовые инструменты постоянно совершенствуются, и точность растёт вместе с ними.
Я планирую в конечном итоге перейти к объединению кратких обзоров тем в разделе с краткими обзорами тем.
Это может устранить множество проблем, но повышение надежности здесь с помощью текущих инструментов, безусловно, значительно увеличит затраты. Потребуется генерация и проведение нескольких раундов валидации, что может стать очень дорогим.
На Daily Summary (5am UTC) - #149 и Daily Summary (5am UTC) - #148, похоже, некоторые темы были написаны с ошибками. Вместо #site-feedback было указано #site feedback, из-за чего тема не получила ссылку. Затем вместо #dev:translations было написано #translations. Аналогично, было введено #Self-hosting вместо #documentation:self-hosting.
Да, это известная проблема. Не стоит тратить время на ручное редактирование или долго настраивать промпт, чтобы обойти это. ![]()
Берт снова ел не те грибы
Но… но ты даже не писал в той теме, лол.
(Кстати, что за Берт и грибы?)
Берт, как правило, используется как прозвище для ИИ-бота Meta.
Похоже, это исправлено? И отформатировано так же, как и первые несколько постов? (Для этого, но похоже, что в посте за 13:00 категории уже исправлены, хотя они выглядят не так, как в первых нескольких (где категории выделены жирным))
Мы перешли на Claude 3.5 Sonnet, поэтому качество стало немного лучше.
Неужели ИИ просто перестал помещать их (категории) в класс ‘упоминание’? Или промпт был изменён?
https://meta.discourse.org/t/daily-summary-5am-utc/291851/179?u=natedhaliwal
РЕДАКТИРОВАНИЕ: Похоже, в следующем посте всё исправилось само собой.
Похоже, что ИИ не сгруппировал темы одной категории вместе, поэтому в посте очень много тем, расположенных в произвольном порядке.
(Не уверен, что этот пост подходит для этого раздела)
https://meta.discourse.org/t/weekly-summary/291947/30?u=natedhaliwal
Почти верно ![]()
Ой, да ладно. @Moin сделал первый пункт, а вторая тема была о чём-то другом, лол.
Мне льстит, что бот думает, будто я занимаюсь делами Мойна. ![]()
Запрос на добавление функции не был создан, так как он уже существует. Я просто дал на него ссылку. Это обсуждалось в канале Support ![]()
Я не участвовал в той теме ![]()
Ого, теперь бот думает, что я Хью.
![]()
Это была огромная ошибка


