« Seuillage de gradient » : différence entre les versions
Aucun résumé des modifications Balise : Éditeur de wikicode 2017 |
Aucun résumé des modifications |
||
| (21 versions intermédiaires par 3 utilisateurs non affichées) | |||
| Ligne 1 : | Ligne 1 : | ||
==Définition== | ==Définition== | ||
Mécanisme couramment utilisé afin d'atténuer le problème d'explosion du gradient en limitant artificiellement la valeur maximale des gradients lors de l'utilisation de la descente de gradient pendant l'entraînement d'un modèle. | Mécanisme couramment utilisé afin d'atténuer le problème d'explosion du gradient en limitant artificiellement la valeur maximale des gradients lors de l'utilisation de la descente de gradient pendant l'entraînement d'un modèle. | ||
==Français== | ==Français== | ||
''' | '''seuillage de gradient''' | ||
'''écrêtage de gradient''' | |||
''' | |||
'''bornement de gradient''' | |||
==Anglais== | |||
'''gradient clipping''' | |||
==Sources== | |||
[https://www.dunod.com/sciences-techniques/deep-learning-avec-keras-et-tensorflow-mise-en-oeuvre-et-cas-concrets-0 Livre - Aurélien Géron, trad. Anne Bohy - ''Deep Learning avec Keras et TensorFlow: Mise en oeuvre et cas concrets'' - ''écrêtage de gradient''] | |||
[https://www.leslibraires.ca/livres/l-apprentissage-profond-ian-goodfellow-9791097160432.html Livre - Ian Goodfellow, Yoshua Bengio, Aaron Courville - ''L'apprentissage profond'' - ''seuillage du gradient'' ] | |||
[[Utilisateur:Patrickdrouin | Termino ]] | |||
[[ | [[Category:Intelligence artificielle]] | ||
[[Category:Apprentissage automatique]] | |||
[[Category:Apprentissage profond]] | |||
[[Category:GRAND LEXIQUE FRANÇAIS]] | |||
Dernière version du 1 mai 2025 à 10:38
Définition
Mécanisme couramment utilisé afin d'atténuer le problème d'explosion du gradient en limitant artificiellement la valeur maximale des gradients lors de l'utilisation de la descente de gradient pendant l'entraînement d'un modèle.
Français
seuillage de gradient
écrêtage de gradient
bornement de gradient
Anglais
gradient clipping
Sources
Contributeurs: Claude Coulombe, Jacques Barolet, Julie Roy, Patrick Drouin, wiki
