ありがとうございます、トークナイザーが何であるかは分かっています。私が知らないのは、Discourseがそれを何のために使用しているのか、そして間違ったトークナイザーを選択した場合に何が起こるかということです。LLMを呼び出すのにトークナイザーは必要ありません。
関連トピック
| トピック | 返信 | 表示 | アクティビティ | |
|---|---|---|---|---|
| Discourse AI - Large Language Model (LLM) settings page | 20 | 2509 | 2025 年 11 月 26 日 | |
| AI powered Spam detection | 11 | 914 | 2025 年 1 月 11 日 | |
| Discourse AI - Spam detection | 22 | 2479 | 2025 年 9 月 25 日 | |
| What's the cheapest/best AI to use for AI Spam? | 6 | 164 | 2025 年 3 月 18 日 | |
| Introducing Discourse AI | 26 | 3631 | 2023 年 5 月 4 日 |