Postagens grandes nos logs da equipe quebram o formato CSV do Excel

Contribuir Bug
1

A equipe pode exportar os registros da equipe em /admin/logs/staff_action_logs para visualizar o histórico completo, pois exibimos apenas um subconjunto de registros na interface de administração. Alguns registros podem conter vírgulas nos detalhes, o que quebra a formatação do CSV.

8 curtidas
2

Can commas be escaped in this output @vinothkannans?

4 curtidas
4

No, the commas are not breaking the CSV file. Maximum number of characters allowed in a single cell of MS Excel sheet is 32,767. If a column exceeded the characters limit then it’s breaking the CSV format. In our case details column having more characters in some post_edit staff actions. If I open the same CSV file in Google Sheets then it renders all the columns correctly.

If needed I’ll limit the maximum number of characters for details column to ~30,000 in the export unconditionally.

8 curtidas
5

30k chars still seems like a lot. Do we need that many characters in a cell? If so, why?

6

It’s due to giant posts. For example, many of our internal runbooks tend to be quite long. Likely only the post_edit staff action as Vinoth noted would have this many characters.

7

Also we storing both old and new post raws for post_edit staff actions in discourse/app/services/staff_action_logger.rb at 4383afb769d97bc9724d5448c0583b14c39782d0 · discourse/discourse · GitHub.

8

We should aggressively truncate this, I don’t see the point of creating such bulk in the database over something so trivial.

5 curtidas
9

Okay, I’ll try to improve this by storing only the edit differences in the raw text.

4 curtidas
10

Gostaria de encerrar este caso. Vamos fazer o mais simples aqui: limitar as células a 30k e, em seguida, encerrar. As alterações relacionadas ao delta são extremamente complexas.

4 curtidas
15

Reabrindo isto. Precisamos implementar algum tipo de correção, é quase impossível revisar logs exportados com posts gigantes quebrando a formatação.

1 curtida
22

Talvez a correção mais simples aqui seja:

> '\"' + 'post \"body\" '.gsub('\"', '\"\"') + '\"'
=> "\"post \"\"body\"\" \""

Acho que isso é permitido em CSV e deve funcionar.