Здравствуйте, @techwithanirudh! 
Недавно мы обновили нашу систему проверки проблем, чтобы поддержать больше сценариев использования. В данный момент у нас нет механизма для очистки уведомлений от плагинов при их удалении. Мы работаем над этим.
На данный момент вы можете попробовать выполнить следующие команды в консоли, чтобы очистить уведомления:
ProblemCheckTracker.where(identifier: "discourse_automation").delete_all
AdminNotice.where(identifier: "discourse_automation").delete_all