« Rotation de phrases » : différence entre les versions


Aucun résumé des modifications
Aucun résumé des modifications
Ligne 17 : Ligne 17 :
[https://yangyutu.github.io/llm_book.github.io/docs/chapter_foundation/t5.html  Source : GitHub]
[https://yangyutu.github.io/llm_book.github.io/docs/chapter_foundation/t5.html  Source : GitHub]


[[Catégorie:vocabulary]]
[[Catégorie:GRAND LEXIQUE FRANÇAIS]]

Version du 26 mai 2025 à 21:25

en construction

Définition

Technique utilisée dans le préentraînement d’un modèle où l’entrée est décalée vers la droite de manière à ce que le modèle commence par un segment choisi au hasard. Cette technique permet au modèle trouver la position de départ d’un document.

Français

Rotation de document

Rotation du documet

Anglais

Document Rotation

Sources

Source : arxiv

Source : GitHub

Contributeurs: Arianne , wiki