如何将AI模型与自定义分词器一起使用

[Falco]

TL;DR 选择最接近的分词器，并将最大上下文设置为少几千个，以确保差异不会影响到您。