Frustraciones con el detector de spam de AI

[lilydjwg]

Revisé el código fuente. Si no cometí errores, el tokenizador se utiliza para dos cosas: contar tokens para estadísticas y estimación de precios, y truncar publicaciones al límite establecido. Así que no debería afectarme mucho si se utiliza uno incorrecto.