Acho que isso não é possível. O post_number seria recalculado se uma postagem fosse separada do tópico (já que não é um post_id, mas a ordem das postagens no tópico). Poderia ser uma pequena ação de postagem que não parece uma postagem ‘real’, mas ainda conta como uma (sussurros também contariam, mas se você está executando tarefas rake, presumo que você seja um administrador que pode vê-los).
Eu me pergunto se excluir a pequena ação de postagem teria ajudado nesta situação? Isso parece ser o problema para você, @UndecidedAdmin?