Sim, atualmente você não pode reverter migrações em diretórios de plugins. O jeito que eu faço é mover a migração para o repositório principal: mv plugins/discourse-example/db/migrate/20210823160357_migration.rb db/migrate/20210823160357_migration.rb
Reverta e, em seguida, mova-a de volta para o plugin: mv db/migrate/20210823160357_migration.rb plugins/discourse-example/db/migrate/20210823160357_migration.rb
Se sua migração não for a última no diretório db do núcleo, você pode usar bin/rails db:migrate:down VERSION=20210823160357 para direcionar a migração que você acabou de mover.