هل سيدعم RAG ملفات PDF في المستقبل؟

JSON هو مجرد نص، لذا فنحن ندعمه بالفعل.

إنه تمثيل غير فعال لنماذج اللغة الكبيرة نظرًا للكم الكبير من التكرار داخل التنسيق، لذا فإنه سيؤدي إلى إهدار بعض الرموز (tokens)، ولكنه سيعمل بشكل عام. أوصي بتشغيل برنامج نصي عليه وإعادة تنسيقه لتحسين أداء RAG.

من الصعب جدًا القيام بذلك تلقائيًا لأن JSON يمكن أن يكون متداخلاً للغاية، واختيار تمثيل نصي مثالي خاص بالمجال يعتمد بشكل كبير على المجال.

3 إعجابات