Резюме на основе ИИ существуют уже некоторое время. Мы получили некоторые первые отзывы, но хотели вернуться к обсуждению. Поскольку мы думаем о том, чтобы инвестировать в дальнейшую разработку резюме на основе ИИ, я пытаюсь понять отзывы пользователей, начиная с нас самих здесь, в Meta.
Используете ли вы резюме на основе ИИ здесь и в своих сообществах?
Да, всё время
Иногда, в зависимости от темы
Нет, это не полезно для меня
0voters
Отзывы
Не стесняйтесь высказать своё мнение и быть честными. Вот несколько направляющих вопросов, которые меня интересуют…
Как часто вы это используете?
Насколько полезно сгенерированное резюме? Считаете ли вы его точным по сравнению с тем, что вы прочитали?
Я бы сказал «нет», но формулировка в опросе кажется мне немного предвзятой. Это не осознанное решение с моей стороны. Скорее, в ситуациях, где это могло бы быть полезно, я ещё ни разу спонтанно не подумал: «Ага, стоит воспользоваться ИИ для суммирования».
Язык: английский не является рабочим языком на моём форуме, хотя практически все его понимают.
Я не могу настроить системный промпт, так как теперь он часто оказывается слишком длинным, содержит галлюцинации и/или нерелевантную информацию.
Я могу обойти языковой барьер. Я попросу GPT, использующий ту же модель, что и для суммирования, выполнить задачу на финском языке, а затем, если я сгенерирую сводку, она будет на финском.
Я пользуюсь им раз в несколько дней. Как модератор, я читаю каждую тему. Однако сводки не всегда полезны для меня, так как они созданы для других.
Иногда они очень полезны, а иногда упускают критически важную информацию. Иногда сводки передают шум, а не суть. Если мне действительно нужна информация, я не полагаюсь на сводки для принятия решения — я читаю всю тему целиком, ведь там может быть скрыт ценный материал, который сводка упустит.
Я часто использую сводки на базе GPT-4. Поскольку модели периодически обновляются, бывают случаи, когда кажется, что языковая модель с трудом понимает тему.
Не всегда. Поскольку я читаю много сообщений, часто, возвращаясь к посту, я оказываюсь внизу темы, а не вверху, где находится кнопка. Это часто заставляет меня прокручивать страницу вверх, чтобы добраться до кнопки. Было бы удобнее, если бы она также располагалась внизу.
Хотелось бы чего-то более креативного (не просто «линейного»), чтобы привлечь внимание: например, рассказывать историю в одном из пяти сообщений и/или собирать обратную связь через опросы для вовлечения аудитории.
Иногда стоит выбирать отдельные темы на основе аналитики (переключаясь между топ-X горячими темами по просмотрам, лайкам).
С такими функциями, по моему мнению, можно было бы заменить рассылку от Discourse и одновременно освежить эту возможность.
Я не отвечал на опрос, потому что мой ответ отличается. Я не знаю, сколько будет стоить подключение моих форумов к API искусственного интеллекта, и ещё не изучал этот вопрос. Когда я изучал варианты перевода, это оказалось слишком дорого, поэтому предполагаю, что и здесь расходы могут быть значительными.
Я не использую это здесь, потому что темы не длинные, и я обычно ищу что-то конкретное.
У меня есть подход к чтению длинных тем, который мне подходит:
Я довольно хорошо умею быстро читать;
Я считаю кнопку «(n) сообщений в теме» на карточке пользователя очень полезной.
В целом я нахожу сгенерированный ИИ текст отталкивающим.
Я уверен, что воспользовался бы резюме от ИИ в крайнем случае. Кроме как нажать на кнопку из любопытства, такая ситуация пока не возникала.
Что я действительно хотел бы увидеть, так это механизм ограничения количества сообщений и пользователей в теме. Если бы это было реализовано, потребность в сгенерированных ИИ резюме была бы меньше.
Одна из моих надежд на интеграцию Discourse AI заключается в том, что она позволит вести разговоры в естественном, человеческом стиле, одновременно сохраняя возможность использования форума как базы знаний для пользователей, которые не следили за всем ходом обсуждения. Семантический поиск (особенно при поиске внутри темы) поможет в этом. Другой подход — использование сгенерированных ИИ кратких описаний тем для разделения темы на отдельные разделы.
Для тем с достаточным количеством сообщений краткое описание могло бы содержать введение от автора оригинального поста (OP), а затем раздел «Обсуждаемые в этой теме вопросы». Аналогично тому, как нажатие кнопки «(n) сообщений в теме» на карточке пользователя извлекает его сообщения из полной темы, для каждого обсуждаемого раздела могла бы быть кнопка, позволяющая извлечь соответствующую подтему из полного обсуждения.
Это также могло бы быть полезно модераторам, которые хотели бы разделить длинные темы на несколько отдельных.
Обратите внимание, что на Meta это становится менее тестируемым, чем раньше. За последние несколько лет предпринимались усилия по сохранению актуальности тем относительно исходного поста.
Контекст
Отзывы
