Aller au contenu

transformeur

Définition, traduction, prononciation, anagramme et synonyme sur le dictionnaire libre Wiktionnaire.
(2017) De l’anglais Transformer, nom utilisé par l’équipe de Google Brain dans son article Attention Is All You Need pour nommer un nouveau modèle de traitement automatique des langues (TAL) parallélisable et largement plus efficace en apprentissage que les réseaux de neurones récurrents et les réseaux neuronaux convolutifs qui analysent les entrées de manière séquentielle.
Singulier Pluriel
transformeur transformeurs
\tʁɑ̃s.fɔʁ.mœʁ\

transformeur \tʁɑ̃s.fɔʁ.mœʁ\ masculin

  1. (Intelligence artificielle) Architecture de réseau de neurones artificiels utilisant principalement le mécanisme d’attention pour traiter les séquences de données.
    • Enfin, on pourra envisager d’intégrer le MuReNN à des modèles génératifs profonds, comme des réseaux génératifs adversariaux, des autoencodeurs variationnels, ou des transformeurs — (Vincent Lostanlen, Prolégomènes aux réseaux de neurones multirésolution, https://hal.archives-ouvertes.fr/hal-02426057/document, 2020, page 6)
    • Les transformeurs sont conçus pour repérer des modèles locaux (des chaînes de mots fréquentes ou des éléments visuels souvent associés, par exemple) qui guident l’interprétation des données. — (Michael Eisenstein, Les protéines, nouveau terrain de jeu de l'IA, magazine Pour la Science, numéro 115, hors-série, mai-juin 2022, page 31)