Почему была выбрана внешняя ИИ-система вместо внутренней?

Примечание: Я не сотрудник Discourse и не сотрудник OpenAI, а модератор категории на форуме OpenAI (создателей ChatGPT и GPT 4) и использую многие функции Discourse AI ещё на этапе разработки.

Средства, о которых вы говорите, — это синтаксический поиск, тогда как здесь речь идёт о семантическом поиске, который использует векторные представления (эмбеддинги) вместо ключевых слов.

По запросу «как работает семантический поиск» в Google находится множество статей; вот одна, которая, думаю, многим здесь понравится:

Да, это часть плагина Discourse AI, а именно раздела Семантически связанные темы.