Помощник — подписи к изображениям

Документация Управление сайтом
, ,
1

:bookmark: Это руководство объясняет, как включить и настроить функцию автоматического подписывания изображений с помощью ИИ, которая является частью функции Helper плагина Discourse AI.

:person_raising_hand: Требуемый уровень доступа пользователя: Администратор

Функция подписей к изображениям позволяет пользователям использовать возможности ИИ для создания подробных описаний любых загружаемых изображений. Пользователи могут вручную запустить процесс подписывания, нажав кнопку Caption with AI (Подписать с помощью ИИ), которая появляется на изображениях в редакторе сообщений.

Возможности

  • Ручная кнопка Caption with AI на изображениях в редакторе сообщений
  • Возможность редактирования подписи с указанием авторства «(Подписано ИИ)»

Включение функции подписей к изображениям

Предварительные требования

Необходимо настроить как минимум одну модель большого языка (LLM) с поддержкой компьютерного зрения от провайдера.

Для начала вы можете настроить их на странице настроек Discourse AI — Large Language Model (LLM).

Настройка

  1. Перейдите в Администрирование → Плагины
  2. Найдите discourse-ai и убедитесь, что он включен
  3. Убедитесь, что функция Helper включена, проверив параметр ai helper enabled
  4. В параметре ai helper enabled features убедитесь, что добавлена опция image_caption — обратите внимание, что по умолчанию она не включена
  5. Выберите агента в настройке ai helper image caption agent
  6. Убедитесь, что в параметре composer ai helper allowed groups включены нужные группы пользователей, чтобы они могли использовать кнопку подписывания

Технические вопросы и ответы

Почему описание подписи не соответствует изображению?

  • Это зависит от используемой LLM с поддержкой компьютерного зрения и самого изображения. Более мощные модели LLM могут лучше описывать картинку, но это зависит от конкретной модели. Также важными факторами, влияющими на качество подписи, являются точность изображения и его содержание.
1 лайк
2

При загрузке изображения предоставляется краткое резюме (около одного предложения). Я предполагаю, что оно генерируется с помощью ИИ и это повлечёт за собой расходы?

1 лайк
3

Да, расходы возникнут, и их размер будет зависеть от провайдера.

1 лайк
4

@NateDhaliwal, это должно помочь вам получить приблизительные оценки.

1 лайк
5

Хорошо, спасибо!

6

Здесь отсутствует одно очень важное указание, на поиск которого у меня ушло много времени:

Список функций с поддержкой AI-помощника по умолчанию не включает «Подпись к изображению», поэтому мне пришлось добавить его отдельно:

На изображении показан скриншот чёрного интерфейса с полем ввода, содержащим текст "image_caption" с красными подчеркиваниями, и строкой поиска с меткой «image_caption» (Подписано ИИ)
На изображении показан скриншот чёрного интерфейса с полем ввода, содержащим текст "image_caption" с красными подчеркиваниями, и строкой поиска с меткой «image_caption» (Подписано ИИ)408×224 4.43 KB

1 лайк
7

Найдена (и исправлена) ещё одна проблема: если для параметра «Разрешённые группы для автоматического подписывания изображений ИИ» выбрать группу «все», то автоматическое подписывание не будет работать ни для кого (независимо от настроек пользователя). Мне пришлось явно указать, что нужно включить все уровни доверия.

На изображении показан экран с опциями включения автоматического подписывания изображений ИИ, где пользователи могут переключать уровни доверия для этой функции. (Подписано ИИ)

8

Все — это немного проблематично, потому что это не реальная группа, и она включает анонимов, которые не могут писать и загружать что-либо.

Но на моём форуме trust_level_0 работает отлично, включая всех, кто вошёл в систему.

2 лайка
9

Кажется, автору темы нужно обновление

2 лайка
10

Мне это очень понравилось :frowning:

Я был в замешательстве, почему это перестало работать, но теперь я хотя бы знаю почему.