La recensione è stata creata nella lingua del mio forum, ma su un altro forum dove ho dimenticato di abilitare il plugin, ho creato l’argomento tramite la console rails e l’argomento è stato creato in inglese invece di usare la lingua del forum 
Dopo aver testato, confermo che la recensione viene creata in inglese quando eseguita tramite il comando rails.
Utilizzando
I18n.with_locale(SiteSetting.default_locale) do
Jobs::YearlyReview.new.execute(force: true, review_year: 2024)
end
lo risolve.