Estou um pouco confuso. Mas se você é um administrador, o que parece ser, você não pode revogar seu próprio status de administrador. Outro administrador tem que fazer isso por você. Enquanto isso, qualquer administrador pode conceder/revogar seu próprio status de moderador e o status de moderador de outros usuários, razão pela qual você pode ver esse botão.
Acho que o usuário tem o endereço de e-mail dele em DISCOURSE_DEVELOPER_EMAILS no seu app.yml.
Se um usuário for promovido a administrador dessa forma, ele sempre será um administrador e você não poderá alterar isso pela interface do usuário. Alguém precisará editar o app.yml e destruir e reiniciar o contêiner (ou reconstruir).