ما هو نقص التجهيز؟

يحدث النقص في التكيف عندما يكون النموذج بسيطًا جدًا، وقد يكون ذلك نتيجة حاجة النموذج إلى مزيد من وقت التدريب أو المزيد من الميزات أو تقليل التنظيم.

مثل الإفراط في التخصيص، عندما يكون النموذج غير مجهز بشكل كافٍ، فإنه لا يمكنه تحديد التوجه السائد داخل البيانات، ما يؤدي إلى أخطاء في التدريب وضعف أداء النموذج. إذا لم يستطع النموذج التعميم جيدًا على بيانات جديدة، فلن يكون قابلًا للاستخدام في مهام التصنيف أو التنبؤ. فالتعميم للنموذج على بيانات جديدة هو ما يُتيح لنا في النهاية استخدام خوارزميات التعلم الآلي يوميًا لإجراء التنبؤات وتصنيف البيانات.

يعد التحيز العالي والتباين المنخفض من المؤشرات الواضحة على نقص التجهيز. نظرًا لأن هذا السلوك يمكن رؤيته أثناء استخدام مجموعة بيانات التدريب، عادةً ما يكون تحديد النماذج ناقصة التجهيز أسهل من تحديد النماذج زائدة التجهيز.

ببساطة، التجهيز الزائد هو عكس نقص التجهيز، ويحدث عندما يتم تدريب النموذج بشكل مفرط أو عندما يحتوي على قدر كبير جدًا من التعقيد، مما يؤدي إلى معدلات خطأ عالية في بيانات الاختبار. يعد التجهيز الزائد للنموذج أكثر شيوعًا من نقص تجهيز النموذج، ويحدث نقص التجهيز عادة في محاولة لتجنب التجهيز الزائد من خلال عملية تسمى "التوقف المبكر".

إذا كان نقص التدريب أو عدم التعقيد يؤدي إلى نقص التخصيص، فإن استراتيجية المنع المنطقية ستكون زيادة مدة التدريب أو إضافة المزيد من المدخلات ذات الصلة. ومع ذلك، إذا قمت بتدريب النموذج أكثر من اللازم أو أضفت الكثير من السمات إليه، فقد تفرط في تعديل نموذجك، ما يؤدي إلى تحيّز منخفض ولكن تباين كبير (أي مفاضلة التحيّز والتباين). في هذا السيناريو، يتطابق النموذج الإحصائي بشكل كبير مع بيانات التدريب، ما يجعله غير قادر على التعميم بشكل جيد على نقاط بيانات جديدة. من المهم ملاحظة أن بعض أنواع النماذج قد تكون أكثر عرضة للإفراط في التخصيص من غيرها، مثل أشجار القرار أو KNN.

قد يكون تحديد التجهيز الزائد أكثر صعوبة من نقص التجهيز لأنه على عكس التجهيز الناقص، تعمل بيانات التدريب بدقة عالية في نموذج زائد التجهيز. لتقييم دقة خوارزمية ما، تُستخدم عادةً تقنية تُعرف باسم التحقق المتقاطع k-fold.

في التحقق التبادلي K-fold، تُقسم البيانات إلى مجموعات فرعية k متساوية الحجم تسمى أيضًا "الطيات". ستكون إحدى الطيات k بمثابة مجموعة اختبار، والمعروفة أيضًا باسم مجموعة الاحتفاظ أو مجموعة التحقق من الصحة، وستدرب الطيات المتبقية النموذج. تتكرر هذه العملية حتى تُستخدم كل طية من الطيات كطية احتفاظ. وبعد كل تقييم، يُحتفظ بالدرجات، وعندما تكتمل كل التكرارات، يُحسب متوسط الدرجات لتقييم أداء النموذج الكلي.

السيناريو المثالي عند تركيب نموذج هو إيجاد التوازن بين التجهيز الزائد ونقص التجهيز. تحديد هذه "النقطة المثالية" بين الاثنين يسمح لنماذج التعلم الآلي بإجراء تنبؤات بدقة.

نظرًا لأنه يمكننا اكتشاف نقص التجهيز بناءً على مجموعة التدريب، يمكننا المساعدة بشكل أفضل في تحديد العلاقة السائدة بين متغيرات الإدخال والمخرجات في البداية. من خلال الحفاظ على تعقيد النموذج المناسب، يمكننا تجنب نقص التجهيز وتقديم تنبؤات أكثر دقة. فيما يلي بعض التقنيات التي يمكن استخدامها لتقليل نقص التجهيز:

يُستخدم التنظيم عادةً لتقليل التباين في النموذج من خلال تطبيق عقوبة على مَعلمات المدخلات ذات المعاملات الأكبر. هناك عدد من الطرق المختلفة، مثل تنظيم L1 وتنظيم Lasso والتسرّب وغيرها، التي تساعد على تقليل الضوضاء والقيم المتطرفة داخل النموذج. ومع ذلك، إذا أصبحت سمات البيانات موحَّدة للغاية، فلن يتمكن النموذج من تحديد التوجه السائد، ما يؤدي إلى نقص تخصيص النموذج. من خلال تقليل مقدار التنظيم، يتم إدخال المزيد من التعقيد والتباين في النموذج، ما يسمح بالتدريب الناجح للنموذج.

كما ذكرنا سابقًا، فإن التوقف عن التدريب في وقت مبكر جدًا يمكن أن يؤدي أيضًا إلى نموذج ناقص التجهيز. لذلك، من خلال تمديد مدة التدريب، يمكن تجنبه. "ومع ذلك، من المهم أن تكون على دراية بالتدريب الزائد، وبالتالي، بالتجهيز الزائدة." سيكون إيجاد التوازن بين السيناريوهين أمرًا أساسيًا.

مع أي نموذج، يتم استخدام سمات محددة لتحديد نتيجة معينة. في حالة عدم وجود سمات تنبؤية كافية، يجب تقديم المزيد من السمات أو السمات ذات الأهمية الأكبر. على سبيل المثال، في الشبكة العصبية، يمكنك إضافة المزيد من الخلايا العصبية المخفية أو في الغابة العشوائية، يمكنك إضافة المزيد من الأشجار. ستضفي هذه العملية مزيدًا من التعقيد على النموذج، مما يؤدي إلى نتائج تدريب أفضل.