Le lip sync ou comment animer les lèvres d'une personne pour lui faire dire ce que l'on veut

Magazine
Marque
Linux Pratique
Numéro
126
Mois de parution
juillet 2021
Spécialités


Résumé

Quelles sont les dernières prouesses réalisées grâce à des réseaux de neurones ? Cette fois, il s'agit de synchroniser automatiquement les mouvements des lèvres d'une personne avec un discours lambda. Magiquement, presque. Et on peut facilement reproduire l'expérience… Donc voyons comment mettre cela en œuvre !


En août 2020 sort un nouvel article de recherche sur le lip sync (synchronisation labiale en français), c'est-à-dire le fait de synchroniser les mouvements des lèvres d'une personne présente dans une vidéo à la parole issue d'un fichier audio. L'article, de Prajwal et al. de l'International Institute of Information Technology d'Hyderabad (Inde) [article], accepté dans une conférence de premier rang, va bien plus loin que ses prédécesseurs. Si les travaux précédents rendaient possible une telle synchronisation, il fallait au mieux disposer d'un modèle pré-entraîné sur la personne ciblée, ce qui demande à la fois de disposer d'un jeu de données de vidéos de ladite personne, et de passer plusieurs jours de calcul à entraîner le modèle. Grâce à quelques optimisations sur les réseaux de neurones utilisés dans les articles précédents, les auteurs parviennent à un résultat plus intéressant : il est désormais possible de faire du lip sync sur n'importe...

Cet article est réservé aux abonnés. Il vous reste 96% à découvrir.
à partir de 21,65€ HT/mois/lecteur pour un accès 5 lecteurs à toute la plateforme
J'en profite


Articles qui pourraient vous intéresser...

Une aide pratique et personnalisée en ligne de commandes avec Navi

Magazine
Marque
Linux Pratique
Numéro
126
Mois de parution
juillet 2021
Spécialités
Résumé

Je suppose que cela vous arrive également, mais lorsque je n’utilise plus une commande pendant quelque temps, cette commande, dont je maîtrisais tous les paramètres et options, m’est redevenue complètement inconnue. Et bien sûr je n’ai rien noté, car sur le coup je ne l’ai pas jugé nécessaire vu que je maîtrisais tout ça. Si j’ai de la chance, je retrouve mon bonheur dans mon historique. Sinon, je dois relire la page de manuel, qui souvent s’avère inutile. Et je finis par retourner sur Internet pour chercher de l’aide. Dans cet article, je vous propose de découvrir Navi pour trouver de l’aide facilement sous forme de cas d’usage pratiques, et en plus d’écrire vos propres pages d’aide (cheatsheets, ou feuilles de triche).

À la découverte de Clear Linux, l'OS made by Intel

Magazine
Marque
Linux Pratique
Numéro
126
Mois de parution
juillet 2021
Spécialités
Résumé

Depuis quelques années, Intel a développé son propre système d’exploitation GNU/Linux, nommé Clear Linux OS. Optimisé pour sa gamme de processeurs, le site Phoronix a démontré que cette distribution était vraiment fiable, puissante, ultra-réactive et effectivement taillée sur mesure pour les puces du leader mondial des fondeurs, mais pas uniquement. En effet, ces dires ont également été confirmés par la firme AMD au sujet de ses propres processeurs, rien de moins.

Faites-vous de bonnes sauvegardes ?

Magazine
Marque
Linux Pratique
HS n°
Numéro
51
Mois de parution
juin 2021
Spécialités
Résumé

En mars 2021, l’incendie d’un datacenter OVH à Strasbourg a mis hors service un nombre très important de sites web (3,6 millions selon Netcraft [1]), ce qui rappelle une fois encore l’importance des sauvegardes. Mais faites-vous de bonnes sauvegardes ?

Faites un RAID avec Linux

Magazine
Marque
Linux Pratique
HS n°
Numéro
51
Mois de parution
juin 2021
Spécialités
Résumé

Le disque dur est un élément de l’ordinateur qui génère beaucoup de problèmes. Il est tentant d’ailleurs de le supprimer. Nous allons présenter le RAID qui permet de maintenir le système en opération après la perte d’un disque.