« BERT » : différence entre les versions

Dernière version du 22 septembre 2026 à 11:30

Définition

Acronyme anglais de Bidirectional Encoder Representations from Transformers (Représentations d'encodeur bidirectionnel à partir de réseaux autoattentifs). Créé par une équipe de Google en 2018, BERT fut le premier grand modèle de langue.

Robotique - Bidirectional Encoder Representations from Transformers — un modèle de langage pré-entraîné qui apprend les représentations textuelles contextuelles en masquant les jetons et en les prédisant à partir du contexte environnant. En robotique, les modèles de style BERT codent les instructions en langage naturel pour les politiques de contrôle conditionnées par le langage. Les plongements SentenceBERT sont utilisés pour la récupération de tâches et l'appariement de similarité d'instructions.

Compléments

BERT utilise une stratégie d'apprentissage profond du traitement automatique du langage naturel (TALN) dans lequel des réseaux autoattentifs sont entraînés d'une manière bidirectionnelle par apprentissage non supervisé.

Français

BERT

Anglais

BERT

Bidirectional Encoder Representations from Transformers

Sources

Source : Wikipedia (BERT - Language model)

Source: Definir Tech

Source : Robotic Center

LEXIQUE DE LA ROBOTIQUE

@@ Ligne 1 : / Ligne 1 : @@
-==en construction==
+== Définition ==
+Acronyme anglais de ''Bidirectional Encoder Representations from Transformers'' (Représentations d'encodeur bidirectionnel à partir de ''[[Réseau autoattentif|réseaux autoattentifs]]'').  Créé par une équipe de Google en 2018, BERT fut le premier grand [[modèle de langue]].
+'''Robotique''' - Bidirectional Encoder Representations from Transformers — un modèle de langage pré-entraîné qui apprend les représentations textuelles contextuelles en masquant les jetons et en les prédisant à partir du contexte environnant. En robotique, les modèles de style BERT codent les instructions en langage naturel pour les politiques de contrôle conditionnées par le langage. Les plongements SentenceBERT sont utilisés pour la récupération de tâches et l'appariement de similarité d'instructions.
+== Compléments ==
-== Définition ==
+BERT utilise une stratégie d'apprentissage profond du [[traitement automatique du langage naturel]] (TALN) dans lequel des [[Réseau autoattentif|réseaux autoattentifs]] sont entraînés d'une manière bidirectionnelle par [[apprentissage non supervisé]].
-XXXXXXXXX
 == Français ==
-''' BERT'''
+'''BERT'''
 == Anglais ==
-''' BERT'''
+'''BERT'''
+'''Bidirectional Encoder Representations from Transformers'''
+==Sources==
+[https://en.wikipedia.org/wiki/BERT_(language_model)  Source : Wikipedia (BERT - Language model) ]
-BERT belongs to a class of NLP-based language algorithms known as transformers. BERT is a massive pre-trained deeply bidirectional encoder-based transformer model that comes in two variants. BERT-Base has 110 million parameters, and BERT-Large has 340 million parameters.
+[https://definir-tech.com/representations-codeur-bidirectionnel-des-transformateurs-bert/ Source: Definir Tech]
-<small>
+[https://www.roboticscenter.ai/fr/glossary    Source : Robotic Center]
-[https://ai.googleblog.com/2018/11/open-sourcing-bert-state-of-art-pre.html  Source : googleblog]
+{{Modèle:Robotique}}
+[[Catégorie:Robotique]]
-[https://www.kdnuggets.com/2021/11/guide-word-embedding-techniques-nlp.html Source : kdnuggets ]
+[[Catégorie:ENGLISH]]
-[[Catégorie:vocabulary]]
+[[Catégorie:GRAND LEXIQUE FRANÇAIS]]

« BERT » : différence entre les versions