RAG وتقييم الأنظمة التوليدية

2 دقيقة
  1. لماذا نقيس الاسترجاع قبل جودة الإجابة النهائية؟
  2. ماذا يعني recall@k في جملة بيانات المرور فيها الفقرات الحجّة (Evidence) موسومة؟
  3. على أيّ مستوى يجب التحقّق من اقتباسات إجابة مُولَّدة؟
  4. لماذا نُضمِّن أسئلة بلا إجابة في جملة بيانات التقييم؟
  5. لماذا نُطبِّق حقوق الوصول قبل البحث الوثائقي؟

الأجوبة. 1. علامة من طرف إلى طرف لا تُحدِّد موضع العطل؛ من دون فقرة حجّة في السياق لا يمكن اتهام التوليد بحقّ. 2. نسبة الأسئلة التي تظهر لها فقرة حجّة واحدة على الأقلّ ضمن k نتيجة. 3. على مستوى كلّ ادّعاء مهمّ، بالتحقّق من أن فقرةً محدَّدة تدعمه فعلاً. 4. تقيس الرفض والامتناع حين تنقص الحجّة. 5. الترشيح بعد التوليد يأتي متأخّراً: يكون وثيقٌ محظور قد دخل سياقَ النموذج ووثّر أو كشف الإجابة.

معاينة — بقية الدرس متاحة للمسجّلين فقط.

هل سجّلت من قبل برمز؟

وصولك مرتبط بحسابك وليس بهذا الرابط. سجّل الدخول بنفس البريد الذي استخدمته في الصف: دورتك بانتظارك، ولا حاجة لإدخال الرمز مجددًا.

تسجيل الدخولليس لديك حساب بعد؟ أنشئ حسابًا
هذا الدرس جزء من وحدة «تعمقات حديثة»

الوحدات الأولى من الدورة مفتوحة للجميع. أما البقية فأمامك ثلاثة خيارات: شراء هذه الدورة مرة واحدة، أو الاشتراك، أو إدخال الرمز الموزّع في القاعة.

هل أنت طالب في هذه الدورة؟

يرتبط الرمز بحسابك: سجّل الدخول أو أنشئ حسابًا وسيُطبَّق تلقائيًا عند عودتك.

ليس لديك حساب بعد؟ أنشئ حسابًا