Réseaux de neurones- techniques d'optimisation
Problèmes récurrents en ANN & Optimisation
Back Propagation Algorithm pour un Multi Layer ANN
Problèmes récurrents
Data preparation
Activation functions: éviter un choix aléatoire
Parameters initialisation: éviter une initialisation aléatoire
Analyse de la courbe d’apprentissage et de validation
Loss analysis
Performance analysis
Generalization problems
Undefitting & solution
Overfitting & solution
Gradient problems
Vanishing problem & solution
Exploding problem & solution
Techniques d'Optimisation et de Régularisation
Techniques de régularisation: Lasso, Ridge, Elastic NET Regularization
Early stopping