Как ваши пользователи поднимают свою тему?
Поскольку редактирование последнего сообщения больше не поднимает тему, я предполагаю, что они отвечают в своей собственной теме. Тогда вам также стоит посмотреть на Discourse No Bump. Это официальный плагин, поддерживаемый командой Discourse.