Помощник — подписи к изображениям

Документация Управление сайтом
, ,
1

:bookmark: Это руководство объясняет, как включить и настроить функцию автоматического подписывания изображений с помощью ИИ, которая является частью функции Helper плагина Discourse AI.

:person_raising_hand: Требуемый уровень доступа пользователя: Администратор

Функция подписей к изображениям позволяет пользователям использовать возможности ИИ для создания подробных описаний любых загружаемых изображений. Пользователи могут вручную запустить процесс подписывания, нажав кнопку Caption with AI (Подписать с помощью ИИ), которая появляется на изображениях в редакторе сообщений.

Возможности

  • Ручная кнопка Caption with AI на изображениях в редакторе сообщений
  • Возможность редактирования подписи с указанием авторства «(Подписано ИИ)»

Включение функции подписей к изображениям

Предварительные требования

Необходимо настроить как минимум одну модель большого языка (LLM) с поддержкой компьютерного зрения от провайдера.

Для начала вы можете настроить их на странице настроек Discourse AI — Large Language Model (LLM).

Настройка

  1. Перейдите в Администрирование → Плагины
  2. Найдите discourse-ai и убедитесь, что он включен
  3. Убедитесь, что функция Helper включена, проверив параметр ai helper enabled
  4. В параметре ai helper enabled features убедитесь, что добавлена опция image_caption — обратите внимание, что по умолчанию она не включена
  5. Выберите агента в настройке ai helper image caption agent
  6. Убедитесь, что в параметре composer ai helper allowed groups включены нужные группы пользователей, чтобы они могли использовать кнопку подписывания

Технические вопросы и ответы

Почему описание подписи не соответствует изображению?

  • Это зависит от используемой LLM с поддержкой компьютерного зрения и самого изображения. Более мощные модели LLM могут лучше описывать картинку, но это зависит от конкретной модели. Также важными факторами, влияющими на качество подписи, являются точность изображения и его содержание.
1 лайк
2

When an image is uploaded, a short summary (about 1 sentence) is given. I assume that is generated by AI and will incur costs?

1 лайк
3

Yes you would incur a cost and that would depend on the provider

1 лайк
4

@NateDhaliwal, this should help give you some rough estimates.

1 лайк
5

Right, thanks!

6

One very important instruction is missing here, took me a long time to figure it out:

The list of AI helper enabled features does not by default include “Image caption”, so I had to add that one specifically:

The image shows a screenshot of a black interface with an input field containing the text "image_caption" with red underlines and a search bar labeled “image_caption” (Captioned by AI)
The image shows a screenshot of a black interface with an input field containing the text "image_caption" with red underlines and a search bar labeled “image_caption” (Captioned by AI)408×224 4.43 KB

1 лайк
7

Found (and fixed) one more problem: if you set “AI auto image caption allowed groups” to the “everyone” group it will not automatically caption anything for anyone (regardless of the user’s setting) I had to explicitly set it to include all trust levels.

The image shows a screen displaying options for enabling AI auto image captioning, allowing users to toggle trust levels for this feature. (Captioned by AI)

8

Everyone is a bit problematic, because it isn’t real group, amd it includes anons, who can’t write and upload anything.

But on my forum trust_level_0 works just fine including everybody who are logged in.

2 лайка
9

I think the op needs an update

2 лайка
10

I really liked it :frowning:

I was confused why it stopped working, but now I at least know why.