Minimisation du risque structurel

term_id: structural_risk_minimization

Category: basic_concepts

Definition

La minimisation du risque structurel (MRS) est une méthode visant à minimiser le risque espéré en contrôlant la complexité du modèle pour prévenir le surapprentissage. Elle étend la minimisation du risque empirique en ajoutant un terme de régularisation

Summary

Un principe de l’apprentissage statistique qui vise à minimiser la borne supérieure de l’erreur de généralisation en équilibrant l’ajustement du modèle et sa complexité.

Key Concepts

  • Dimension de VC
  • Régularisation
  • Erreur de généralisation
  • Pénalité de complexité du modèle

Use Cases

  • Entraînement des Machines à Vecteurs de Support (SVM)
  • Sélection du degré polynomial en régression
  • Élagage des arbres de décision pour éviter le surapprentissage