No tuve suerte. Cambié la configuración regional predeterminada de fi a en_US comentando DISCOURSE_DEFAULT_LOCALE: fi y cambiándola desde la configuración, y eso tampoco ayudó. El modo seguro dio lo mismo.
Tengo esto en web_only.yml y data.yml:
LANG: fi_FI.UTF-8
LANGUAGE: fi_FI.UTF-8
Intenté cambiar esos a en_US.UTF-i en ambos yml, pero eso provocó fallos en las reconstrucciones.
De todos modos, diría que tampoco es una cuestión de configuraciones regionales 
Empezaré a investigar las personas, pero esas deberían ser las predeterminadas, no he editado ninguna de ellas.
Después de todo, este no es un gran problema.