EN - FR - DE - ES - IT - PT -

LexiconDream

🎚️ المعلمة الفائقة

إعداد تكوين يتحكم في عملية تدريب النموذج.

المعلمة الفائقة

يتم تعلم الأوزان، ثم اختيار المعلمات الفائقة. وتشمل هذه الفئة معدل التعلم، وحجم الدفعة، وعدد الطبقات، ومعدل التسرب، وقوة التنظيم. وتتحكم هذه المعلمات في كيفية سير عملية التدريب وكيفية بناء النموذج.

يؤدي الخطأ في هذه العمليات إلى إهدار الوقت والجهد الحاسوبي. معدل التعلم المرتفع جدًا يؤدي إلى تباعد النتائج، بينما المعدل المنخفض جدًا يؤدي إلى زحفها. يؤثر حجم الدفعة على تشويش التدرج واستخدام الذاكرة. يحدد العمق والعرض السعة، والتي يجب أن تتناسب مع تعقيد المهمة وحجم البيانات.

طرق الضبط الشائعة

عملية الضبط مكلفة. يتطلب كل تكوين تشغيلًا تدريبيًا كاملًا، وتتوسع مساحة البحث بسرعة. يقوم الممارسون ذوو الخبرة بتضييق نطاق البحث باستخدام معرفتهم بالمجال قبل الأتمتة، وهو ما يتفوق غالبًا على البحث الشامل.

Comments (2)

  1. Stuart Price
    Hyperparameters are set before training starts. Parameters are learned during training. That's the key difference.
  2. Barbara Stein
    Tuning hyperparameters is more art than science. Grid search, random search, Bayesian optimization. There are many approaches.

Leave a comment