La dernière technologie Animate Anyy Anyme2 d'Alibaba a réalisé le remplacement précis des personnages vidéo, et ses progrès révolutionnaires ont attiré une attention généralisée. Cette technologie peut remplacer l'image de caractères cible en la vidéo en temps réel sur la base du maintien de l'action vidéo originale, et prend en charge l'ajustement de l'éclairage et l'adaptation de l'environnement d'arrière-plan pour réaliser une fusion profonde entre les caractères et les scènes. Le cœur de cette technologie réside dans sa technologie de liaison squelettique dynamique et ses stratégies de masquage indépendantes de la forme, qui peuvent capturer avec précision les mouvements humains et les expressions faciales, et décrire efficacement la relation entre le caractère et l'environnement, générant ainsi des effets d'animation très réalistes.
Récemment, Alibaba a publié sa dernière réussite technologique, Animate Anyody2, qui est une technologie révolutionnaire qui peut permettre un remplacement précis des personnages vidéo. Selon l'affichage de cas publié sur le site officiel du projet, les utilisateurs n'ont qu'à fournir la vidéo d'origine et l'image du caractère cible, et le système peut effectuer le remplacement en temps réel de l'image de caractère sur la base de la conservation de la trajectoire d'action vidéo d'origine .
Les données expérimentales montrent que le système peut migrer complètement les mouvements de tir du joueur de football vers des personnages animés, tout en conservant les caractéristiques physiques réelles de la trajectoire de mouvement de la sphère. En réponse aux besoins complexes de la production cinématographique et télévisée, le système prend également en charge l'ajustement de l'éclairage personnalisé et l'adaptation de l'environnement de fond pour obtenir une intégration profonde des personnages et des scènes.
La technologie dynamique de liaison osseuse équipée de ce système peut capturer avec précision la trajectoire de mouvement des membres et des micro-expressions faciales en suivant avec précision 28 points osseux clés dans le corps humain. Dans la vidéo de test public, que ce soit la rotation continue du danseur ou la manœuvre rapide des arts martiaux, les personnages remplacés peuvent maintenir la cohérence du mouvement.
Au niveau technique, le système adopte une stratégie de masque indépendante de la forme qui peut décrire plus efficacement la relation entre les rôles et l'environnement. En même temps, pour améliorer l'interaction entre le personnage et les objets environnants, Animate n'importe qui2 a introduit un guide d'objet léger. Le guide est responsable de l'extraction des caractéristiques des objets qui interagissent avec le caractère et de l'injection de ces fonctionnalités dans le processus de débraillage à travers des techniques de fusion spatiale. Cette conception rend l'interaction du personnage avec l'environnement et les objets semblent plus lisses et plus réalistes lors du déménagement.
Les résultats expérimentaux montrent que Animate Anyody2 fonctionne bien dans la génération d'animations de personnages qui sont adaptables aux environnements. Par rapport à des produits similaires sur le marché aujourd'hui, tels que Viggle et MIMO, Animate n'importe qui2 montre un niveau plus élevé de cohérence des personnages, de rétention des détails et d'authenticité d'interaction. Cela marque le développement de la technologie d'animation des personnages à un nouveau niveau.
Avec le lancement d'Animate Anyody2, le potentiel d'application de l'animation des personnages dans plusieurs domaines tels que les jeux, la production cinématographique et télévisée et la réalité virtuelle a été élargi. Il fournit non seulement un outil plus puissant pour les producteurs d'animation, mais apporte également une expérience visuelle plus vive et réaliste au public.
Projet: https://humananigc.github.io/animate-anyone-2/
Points clés:
Animate n'importe qui2 capture les caractéristiques de l'environnement pour réaliser l'interaction réelle entre les personnages et l'environnement.
La nouvelle technologie introduit les guides d'objets et la fusion spatiale pour améliorer l'interaction entre les caractères et les objets.
Par rapport à des technologies similaires, Animate Anyody2 montre des avantages évidents en détail et en cohérence.
En bref, avec sa technologie de pointe et ses performances exceptionnelles, Animate Anyway2 a établi une nouvelle référence pour la technologie d'animation des personnages et a montré d'énormes perspectives d'application dans les domaines des jeux, du cinéma et de la télévision, et vaut la peine de se réjouir de son développement et de son application futurs.