IntermédiaireGénération image, vidéo & audio
Lip sync (synchronisation labiale)
En anglais : Lip sync
Technique d’IA qui anime les lèvres et le bas du visage d’une personne ou d’un personnage pour qu’ils correspondent exactement à une piste audio donnée.
Le modèle analyse les sons de la parole, puis génère les mouvements de bouche, de mâchoire et parfois d’expression qui leur correspondent. Il peut s’appliquer à une vidéo existante, par exemple pour doubler un film dans une autre langue avec des lèvres crédibles, ou animer un portrait fixe. Associée à la synthèse vocale, la synchronisation labiale permet de créer des présentateurs virtuels. Elle peut aussi servir à fabriquer des deepfakes, d’où l’importance du consentement des personnes filmées.
Exemple
Une entreprise traduit sa vidéo de formation interne en plusieurs langues, et la synchronisation labiale ajuste la bouche du formateur à chaque doublage, avec son accord.
Notions liées
Avatar IA
DébutantPersonnage numérique animé par l’IA, réaliste ou stylisé, capable de parler, de bouger et parfois de converser en temps réel à partir d’un texte ou d’une voix.
Clonage vocal
IntermédiaireTechnique d’IA qui reproduit la voix d’une personne précise à partir d’échantillons de sa parole, afin de lui faire prononcer n’importe quel texte.