أوه، فهمت الآن، شكرًا على الشرح، هذا ما كنت أفتقده.
بالمناسبة، أعرف أنه غالبًا ما يكون هناك إعادة ترتيب في تقنية RAG الأكثر تقدمًا. هل هناك شيء مثل إعادة الترتيب في كيفية تعامل Discourse معها؟ هل تعتقد أن إضافة خطوة إعادة ترتيب سيكون لها أي تأثير إيجابي؟
إعادة الترتيب قيد التنفيذ.
قام @Falco / @Roman بتطبيق مُعيد ترتيب أساسي في discourse:
يتم استخدام هذا في البحث الدلالي و RAG. ومع ذلك، فهو مخفي للغاية وليس من السهل تكوينه.
أعتقد أن الخطة متوسطة المدى هنا (التي ناقشناها مع @awesomerobot) كانت الانتقال من مصطلحات LLM إلى نماذج… وربما القيام ببعض توحيد واجهة المستخدم حتى تتمكن من تعريف التضمينات/مُعيدات الترتيب و LLMs في واجهة واحدة.
في الوقت الحالي، ندعم فقط واجهة برمجة تطبيقات مُعيد ترتيب محددة جدًا من hugging face.
إنه بالتأكيد يحسن جودة النتائج.
رائع!
إذًا، هذا معطل حاليًا افتراضيًا، ولا يمكن تهيئته بسهولة في خطة مستضافة (احترافية)؟
لست متأكدًا، دعنا ننتظر رد @Falco.
مرحباً @Falco
هل هناك أي طريقة لتمكين إعادة الترتيب للاختبار أو ربما جدول زمني؟
لقد قمنا للتو بنشر تحسين كبير للتكنولوجيا الأساسية التي تدعم البحث الدلالي في Discourse في DEV: Re-introduce PG Vector 0.8.0 upgrade by romanrizzi · Pull Request #35233 · discourse/discourse · GitHub.
هل يمكنك إعادة تجربة حالة الاستخدام الخاصة بك الآن، فقد تم نشره بالفعل على موقعك. توقعي هو أن هذا سيجعل RAG أفضل دون الحاجة إلى إعادة ترتيب.
لا نزال نرغب في جعل أداة إعادة الترتيب متاحة على نطاق واسع، لكننا ننتظر بعض التغييرات في المنبع لتطبيقها أولاً.
شكراً فالكو!
هل سيعمل هذا فقط مع البحث الدلالي حول مواضيع Discourse، أم أيضًا مع مستندات RAG التي تم تحميلها إلى شخصية؟ من تجربتي الخاصة، يعمل الذكاء الاصطناعي بشكل جيد جدًا مع مواضيع المنتدى (أي على ask.discourse)، ولكنه لا يعمل بشكل جيد مع المستندات التي تم تحميلها إلى شخصية (أو لم أجد الصيغة الأفضل بعد).
يؤثر على جميع استخدامات التضمينات في Discourse، بما في ذلك المواضيع ذات الصلة، و RAG، والبحث، واقتراحات فئات المؤلف، والعلامات، وما إلى ذلك.
يا @tpetrov، هل تحسنت النتائج مع نموذج التضمين الجديد؟
مرحباً فالكو، أنا آسف، لم يكن لدي وقت للاختبار بشكل مكثف، لذلك لا يمكنني حقاً القول.
هل هناك أي طريقة للتبديل بين الاثنين للمقارنة؟
ليس الآن، كانت النماذج القديمة والجديدة متاحة لبضعة أشهر، لكننا أوقفنا النماذج القديمة مؤخرًا في استضافتنا.