« Insertion de jeton » : différence entre les versions


Aucun résumé des modifications
Aucun résumé des modifications
 
(Une version intermédiaire par le même utilisateur non affichée)
Ligne 1 : Ligne 1 :
== Définition ==
== Définition ==
Technique utilisée dans le '''[[préentraînement]]''' d’un '''[[modèle de langue|modèle]]''' qui est similaire au '''[[masquage de segment textuel]]''' où un certain nombre de passages de texte de différentes longueurs (y compris la longueur 0) sont échantillonnés et remplacés par un seul '''[[jeton textuel|jeton]]''' ou segment textuel.
Technique utilisée dans le '''[[préentraînement]]''' d’un '''[[modèle de langue|modèle]]''' qui est similaire au '''[[masquage de segment textuel]]''' où un certain nombre de passages de texte de différentes longueurs (y compris la longueur 0) sont échantillonnés et remplacés par un seul '''[[jeton textuel / jeton génératif|jeton textuel]]''' ou jeton génératif.


== Français ==
== Français ==
''' insertion de segment textuel'''
''' insertion de jeton textuel'''
 
''' insertion de jeton génératif'''


== Anglais ==
== Anglais ==

Dernière version du 3 septembre 2026 à 17:00

Définition

Technique utilisée dans le préentraînement d’un modèle qui est similaire au masquage de segment textuel où un certain nombre de passages de texte de différentes longueurs (y compris la longueur 0) sont échantillonnés et remplacés par un seul jeton textuel ou jeton génératif.

Français

insertion de jeton textuel

insertion de jeton génératif

Anglais

text infilling

Sources

Source : arxiv

Source : GitHub