TL;DR: 最も近いトークナイザーを選択し、最大コンテキストを数千ほど少なく設定して、その差が影響しないようにします。
Falco
(Falco)
2
関連トピック
| トピック | 返信 | 表示 | アクティビティ | |
|---|---|---|---|---|
| Adding Semantic Search feature for our self-hosted discourse site | 9 | 256 | 2025 年 3 月 19 日 | |
| Frustrations on AI spam detector | 9 | 174 | 2025 年 12 月 21 日 | |
| AI exceeds LLM token thresholds randomly and unpredictably | 3 | 76 | 2026 年 5 月 6 日 | |
| Configuring OpenRouter language models | 0 | 1114 | 2024 年 12 月 10 日 | |
| How to implement Mistral with Embeddings | 6 | 244 | 2025 年 5 月 11 日 |