Obrigado Jay, essa é uma ótima ideia. Mas estamos em hospedagem Discourse, então somos limitados em termos do que podemos fazer.
Adicionei um pouco de CSS conforme a sugestão de ondrej.
Idealmente, seria direcionado apenas a usuários não anônimos (desapareceria quando o usuário entrasse no modo anônimo e pudesse ver o botão de resposta). Não tenho certeza se isso é viável.