AttentionMécanisme d’attention
Réponse directe
Un mécanisme qui pondère les éléments les plus utiles pour produire un résultat.
Explication détaillée
L’attention calcule quelles parties de l’entrée sont les plus pertinentes les unes par rapport aux autres. Elle aide le modèle à exploiter le contexte, même lorsque les informations liées sont éloignées.
Exemple
Dans une traduction, identifier à quel mot français correspond un mot de la phrase source.
Analogie
Orienter une lampe vers les passages importants plutôt que d’éclairer tout le texte de la même façon.
Erreurs fréquentes
Assimiler ce mécanisme mathématique à l’attention consciente d’un humain.
Dernière mise à jour : 22/07/2026 · Rédaction : Alban Speckaert