« BERT » : différence entre les versions
m (Remplacement de texte : « ↵↵==Sources== » par « ==Sources== ») |
Aucun résumé des modifications |
||
| Ligne 1 : | Ligne 1 : | ||
== Définition == | == Définition == | ||
Acronyme anglais de ''Bidirectional Encoder Representations from Transformers'' (Représentations d'encodeur bidirectionnel à partir de ''[[Réseau autoattentif|réseaux autoattentifs]]''. Créé par une équipe de Google en 2018, BERT fut le premier grand [[modèle de langue]]. | Acronyme anglais de ''Bidirectional Encoder Representations from Transformers'' (Représentations d'encodeur bidirectionnel à partir de ''[[Réseau autoattentif|réseaux autoattentifs]]''). Créé par une équipe de Google en 2018, BERT fut le premier grand [[modèle de langue]]. | ||
== Compléments == | == Compléments == | ||
Dernière version du 29 juin 2025 à 17:22
Définition
Acronyme anglais de Bidirectional Encoder Representations from Transformers (Représentations d'encodeur bidirectionnel à partir de réseaux autoattentifs). Créé par une équipe de Google en 2018, BERT fut le premier grand modèle de langue.
Compléments
BERT utilise une stratégie d'apprentissage profond du traitement automatique du langage naturel (TALN) dans lequel des réseaux autoattentifs sont entraînés d'une manière bidirectionnelle par apprentissage non supervisé.
Français
BERT
Anglais
BERT
Bidirectional Encoder Representations from Transformers
Sources
Contributeurs: Arianne , Claude Coulombe, Imane Meziani, Jean Benoît Morel, wiki
