LIA dAlibaba transforme les photos fixes en paroles et en chants

EMO (Emotive Portrait Alive) est une nouvelle IA générative étudiée par l'Institut d'informatique intelligente (IIC) d'Alibaba avec la capacité de transformer « par magie » n'importe quelle image en paroles et en chants réalistes.

En d’autres termes, l’IA d’Alibaba peut transformer une image de référence statique et un son vocal en une vidéo capable de parler et de chanter avec des expressions naturelles.

Les IA précédentes ne transformaient que la bouche et une partie du visage, tandis qu'EMO peut créer des expressions faciales, des expressions buccales naturelles, une synchronisation précise des lèvres, déplacer les sourcils, froncer les sourcils ou même se balancer au rythme de la musique.

Alibaba a publié quelques vidéos montrant comment les images se transforment en vidéos et chantent des chansons importées à la volée. EMO prend en charge l'anglais, le chinois et de nombreuses autres langues.

Alibaba a révélé que pour qu'EMO puisse créer des expressions faciales réalistes, il a été formé avec une grande quantité de données d'image, d'audio et de vidéo via son propre modèle de diffusion appelé Audio2Video.

Pour relever le défi majeur actuel du réalisme et de l'expressivité dans la génération de vidéos à partir d'images et de sons, l'équipe de recherche s'est concentrée sur la relation et les nuances entre les signaux audio et les mouvements du visage, en contournant le lien intermédiaire du modèle 3D ou les repères du visage, en effectuant une transition transparente entre les images et en préservant la cohérence de la vidéo.

Alibaba n'a pas révélé quand il publierait cette IA au public, mais a publié les données d'EMO sur Github et des articles de recherche publiés sur ArXiv.

Laisser un commentaire

10 idées faciles de décoration d'Halloween pour une chambre d'étudiant qui n'abîmeront pas les murs

10 idées faciles de décoration d'Halloween pour une chambre d'étudiant qui n'abîmeront pas les murs

Créez une chambre d'étudiant festive grâce à 10 idées de décorations d'Halloween sans danger pour les murs, des conseils d'affichage adaptés aux locataires, des vérifications de sécurité incendie et des conseils de démontage.

Organisez une soirée films d'horreur nostalgiques des années 80 grâce à ces idées !

Organisez une soirée films d'horreur nostalgiques des années 80 grâce à ces idées !

Organisez une soirée films d'horreur des années 80 avec un niveau de peur clairement défini, une décoration rétro, des tenues inspirées de l'époque, des en-cas faciles à préparer et des jeux amusants pour la soirée cinéma.

La tendance des méchants : Les meilleurs costumes sombres pour Halloween 2026

La tendance des méchants : Les meilleurs costumes sombres pour Halloween 2026

Créez un look sombre et sophistiqué pour Halloween 2026 grâce à six idées de costumes inspirés des méchants, des conseils de style pratiques, des indications budgétaires et des vérifications de sécurité.

Une chasse aux bonbons adaptée aux personnes allergiques : le projet de la citrouille turquoise en 2026

Une chasse aux bonbons adaptée aux personnes allergiques : le projet de la citrouille turquoise en 2026

Découvrez ce que signifie le projet Teal Pumpkin en 2026, comment les hôtes peuvent offrir des friandises non alimentaires distinctes et comment les familles peuvent planifier des itinéraires et examiner les bonbons en toute sécurité.

La chasse aux bonbons en 2026 : ce qui change pour la nuit d’Halloween

La chasse aux bonbons en 2026 : ce qui change pour la nuit d’Halloween

Découvrez ce que révèle le dernier sondage d'Halloween 2026 sur la collecte de bonbons, les événements communautaires et les moyens pratiques d'organiser une sortie de quartier plus sûre.

Comment organiser une fête de la lune d'Halloween sur le thème de la spiritualité étoilée

Comment organiser une fête de la lune d'Halloween sur le thème de la spiritualité étoilée

Organisez une fête d'Halloween au clair de lune empreinte de réflexion, avec possibilité de méditation, observation simple des étoiles, indications précises sur le ciel de 2026, cadre spirituel respectueux et éclairage sécuritaire.

CAF : comment contester une dette et respecter les délais de recours

CAF : comment contester une dette et respecter les délais de recours

Dette Caf contestée : distinguez rectification, recours amiable et remise de dette, vérifiez le délai applicable et adressez votre demande au bon organisme.

Comment jeter une batterie externe à Paris ? Comparer magasin, Trimobile et Espace tri

Comment jeter une batterie externe à Paris ? Comparer magasin, Trimobile et Espace tri

À Paris, une batterie externe usagée va dans une collecte dédiée. Comparez magasin, Trimobile et Espace tri, avec les précautions si elle est endommagée.

Changement d’adresse à Amiens : quelles démarches effectuer avant et après le déménagement ?

Changement d’adresse à Amiens : quelles démarches effectuer avant et après le déménagement ?

Impôts, carte grise, Caf, collecte des déchets et stationnement : suivez les étapes essentielles pour signaler votre changement d’adresse à Amiens.

Comment se débarrasser d’un ordinateur à Angers ? Réparation, reprise ou déchèterie

Comment se débarrasser d’un ordinateur à Angers ? Réparation, reprise ou déchèterie

À Angers, comparez don, réparation, reprise en magasin et déchèterie pour un ordinateur usagé. Accès par badge, horaires et effacement des données.