الرياضيات المفيدة للتعلم العميق

1. إذا كانت X بشكل B×D وكانت W بشكل D×H، فما شكل XW؟
2. ما الشكل الذي يجب أن يكون لـ ∂L/∂W؟
3. لماذا نطرح أكبر Logit قبل softmax؟
4. فيمَ يُفيد فحص التدرج (Gradient check)؟
5. [E] لماذا تُشكِّل الأبعاد اختباراً منطقياً؟

الأجوبة. 1. B×H. 2. D×H، مثل W. 3. للوقاية من تجاوز السَّعة (Overflow) دون تغيير الاحتمالات. 4. لمقارنة المشتقّ التحليلي بفرق منتهٍ. 5. عمليةٌ لا تتوافق أبعادها لا يمكن أن تكون الحساب المُعلَن.

الهدف: إتقان الأدوات اللازمة للتفكير في الشبكة دون تحويل الدورة إلى مؤلَّف رياضي.