J’ai vérifié le code source. Si je ne me suis pas trompé, le tokenizer est utilisé pour deux choses : compter les tokens pour les statistiques et l’estimation des prix, et tronquer les publications à la limite définie. Donc, cela ne devrait pas beaucoup m’affecter si un mauvais est utilisé.
lilydjwg
9
Sujets connexes
| Sujet | Réponses | Vues | Activité | |
|---|---|---|---|---|
| AI powered Spam detection | 11 | 1230 | Janvier 11, 2025 | |
| Random discussion about Discourse LLM setup | 21 | 134 | Août 20, 2026 | |
| Introducing Discourse AI | 26 | 4260 | Mai 4, 2023 | |
| What's the cheapest/best AI to use for AI Spam? | 6 | 486 | Mars 18, 2025 | |
| Discourse AI spam detection replaces Akismet plugin | 13 | 1261 | Novembre 4, 2025 |