« Insertion de jeton » : différence entre les versions


Aucun résumé des modifications
m (Claude COULOMBE a déplacé la page Insertion de jeton textuel vers Insertion de jeton)
(Aucune différence)

Version du 3 septembre 2026 à 16:59

Définition

Technique utilisée dans le préentraînement d’un modèle qui est similaire au masquage de segment textuel où un certain nombre de passages de texte de différentes longueurs (y compris la longueur 0) sont échantillonnés et remplacés par un seul jeton ou segment textuel.

Français

insertion de segment textuel

Anglais

text infilling

Sources

Source : arxiv

Source : GitHub