Выглядит почти идентично тому, что я опубликовал в Cannot rebuild with Discourse AI. Хотя в обоих логах ошибок есть общая проблема с библиотекой tokenizers, из-за которой не удаётся выполнить команду rake db:migrate, в вашем логе дополнительно присутствует ошибка запуска сервера Redis, которой нет в моём.
@JammyDodger, как я уже писал в Cannot rebuild with Discourse AI, проблема точно в плагине AI.