كيفية استخدام نماذج الذكاء الاصطناعي مع مُرمّزات مخصصة

TL;DR اختر أقرب مُرمّز (tokenizer) واضبط السياق الأقصى (maximum context) على أقل بضعة آلاف للسماح للفارق بعدم التأثير عليك.