Publicaciones grandes en los registros del personal rompen el formato CSV de Excel

Contribuir Error
1

El personal puede exportar los registros del personal desde /admin/logs/staff_action_logs para ver el historial completo, ya que solo mostramos un subconjunto de registros dentro de la interfaz de administración. Ciertos registros pueden incluir comas en los detalles, lo que rompe el formato del CSV.

8 Me gusta
2

Can commas be escaped in this output @vinothkannans?

4 Me gusta
4

No, the commas are not breaking the CSV file. Maximum number of characters allowed in a single cell of MS Excel sheet is 32,767. If a column exceeded the characters limit then it’s breaking the CSV format. In our case details column having more characters in some post_edit staff actions. If I open the same CSV file in Google Sheets then it renders all the columns correctly.

If needed I’ll limit the maximum number of characters for details column to ~30,000 in the export unconditionally.

8 Me gusta
5

30k chars still seems like a lot. Do we need that many characters in a cell? If so, why?

6

It’s due to giant posts. For example, many of our internal runbooks tend to be quite long. Likely only the post_edit staff action as Vinoth noted would have this many characters.

7

Also we storing both old and new post raws for post_edit staff actions in discourse/app/services/staff_action_logger.rb at 4383afb769d97bc9724d5448c0583b14c39782d0 · discourse/discourse · GitHub.

8

We should aggressively truncate this, I don’t see the point of creating such bulk in the database over something so trivial.

5 Me gusta
9

Okay, I’ll try to improve this by storing only the edit differences in the raw text.

4 Me gusta
10

Me gustaría cerrar este asunto. Hagamos lo más sencillo: limitaremos las celdas a 30k y luego lo cerraremos. Lo de los deltas es un cambio muy, muy complejo.

4 Me gusta
15

Reabriendo esto. Necesitamos implementar algún tipo de solución, es casi imposible revisar los registros exportados con publicaciones gigantes que rompen el formato.

1 me gusta
22

Quizás la solución más sencilla aquí es:

> '"' +  'post "body" ' .gsub('"', '""') + '"'
=> "\"post \"\"body\"\" \""

Creo que esto está permitido en CSV y debería funcionar.