Grâce à l’IA, les technologies de capture de mouvement connaissent une vague d’innovations sans précédent, et Runway est l’un des leaders du secteur. Avec Act-Two, Runway présente son nouveau produit phare : une solution de capture de mouvement qui non seulement établit de nouvelles normes en matière de qualité, mais combine également le suivi de la tête, du visage, du corps et des mains, le tout à partir d’une simple vidéo.
Qu’est-ce qu’Act-Two ?
Act-Two est le tout dernier modèle d’IA de Runway, spécialement conçu pour la capture et la génération de mouvements avec une grande précision. Il permet notamment de suivre simultanément les mouvements de la tête, du visage, du corps et des mains avec une précision sans précédent. Pour cela, l’outil a simplement besoin d’une « vidéo de performance motrice » (c’est-à-dire une vidéo du mouvement souhaité) et d’un personnage 3D ou d’une figure de référence comme cible. L’IA se charge ensuite du reste et transfère automatiquement la performance au modèle cible.
Innovations techniques et particularités
Jusqu’à présent, les systèmes de capture de mouvement nécessitaient souvent un matériel coûteux, des combinaisons spéciales ou des technologies de marquage. Act-Two rompt avec ce paradigme :
- Pas de marqueur, pas de combinaison : le logiciel extrait les mouvements directement à partir de vidéos standard.
- Suivi complet du corps et du visage : outre le corps, les mouvements de la tête, les expressions faciales et même les gestes des mains sont également détectés et transférés.
- Amélioration de la qualité grâce à l’IA : la nouvelle génération de modèles offre des mouvements nettement plus réalistes et naturels, y compris des expressions faciales subtiles et des interactions entre les doigts.
Workflow et utilisation : comment fonctionne Act-Two ?
Le workflow est très simple :
- Entrée : une vidéo d’une performance quelconque (par exemple, une scène de danse, des gestes ou des expressions faciales).
- Personnage de référence : un personnage en 3D auquel les mouvements doivent être transférés.
- Résultat : l’IA génère une séquence animée dans laquelle le personnage de référence imite exactement les mouvements de l’original, y compris les expressions faciales subtiles et les gestes des mains.
Pour les cinéastes indépendants, les concepteurs de jeux ou les créateurs de contenu, cela signifie que des animations dignes du cinéma sont désormais possibles sans installation coûteuse en studio.
À qui s’adresse Act-Two ?
- Cinéastes et artistes VFX : pour des prévisualisations rapides ou des animations de haute qualité.
- Développeurs de jeux : pour des personnages réalistes dans les jeux sans studio de capture de mouvement coûteux.
- Créatifs et créateurs de contenu : pour les réseaux sociaux, les clips musicaux ou les productions virtuelles.
- Artistes 3D : pour l’animation rapide de personnages ou de prototypes.
Conclusion : un grand pas en avant pour l’animation assistée par l’IA
Avec Act-Two, Runway lance un outil qui simplifie radicalement l’accès à la capture de mouvement de haute qualité, tout en atteignant un nouveau niveau de qualité. La possibilité d’extraire des mouvements complexes à partir de simples vidéos et de les transférer à n’importe quel personnage ouvre de toutes nouvelles perspectives aux créatifs. Si vous travaillez dans le domaine de la 3D, de l’animation ou de la production vidéo, vous devriez absolument vous intéresser de plus près à Act-Two.
Sources :
