ありがとうございます、トークナイザーが何であるかは分かっています。私が知らないのは、Discourseがそれを何のために使用しているのか、そして間違ったトークナイザーを選択した場合に何が起こるかということです。LLMを呼び出すのにトークナイザーは必要ありません。
関連トピック
| トピック | 返信 | 表示 | アクティビティ | |
|---|---|---|---|---|
| Discourse AI - Large Language Model (LLM) settings page | 20 | 2546 | 2025 年 11 月 26 日 | |
| AI powered Spam detection | 11 | 916 | 2025 年 1 月 11 日 | |
| Discourse AI - Spam detection | 22 | 2508 | 2025 年 9 月 25 日 | |
| What's the cheapest/best AI to use for AI Spam? | 6 | 166 | 2025 年 3 月 18 日 | |
| Discourse AI | 92 | 37821 | 2025 年 12 月 4 日 |