AIスパム検出器に関する不満

,

ありがとうございます、トークナイザーが何であるかは分かっています。私が知らないのは、Discourseがそれを何のために使用しているのか、そして間違ったトークナイザーを選択した場合に何が起こるかということです。LLMを呼び出すのにトークナイザーは必要ありません。