L'application Tongyi d'Alibaba a récemment lancé une nouvelle fonctionnalité accrocheuse : le remplacement en un clic des caractères dans les vidéos. Cette fonctionnalité est basée sur le modèle Motionshop publié par Alibaba Tongyi Lab au début de l'année, qui a reçu une large attention dans le monde entier et a été intégré à l'application Tongyi et est ouvert gratuitement à tous les utilisateurs. Cette décision abaisse considérablement le seuil de création vidéo et de production d’animation, offrant ainsi plus de possibilités pour la production de contenu créatif. L'article présentera en détail les caractéristiques techniques du modèle Motionshop et les projets futurs de l'application Tongyi.
Tongyi App a récemment lancé une fonction de jeu de rôle innovante, qui permet aux utilisateurs de remplacer facilement les personnages de la vidéo en un seul clic. Cette fonctionnalité bénéficie du modèle Motionshop lancé par Alibaba Tongyi Lab au début de cette année. Depuis sa sortie, le modèle a attiré une grande attention de la part des créateurs du monde entier.
Actuellement, Motionshop a été commercialisé et intégré à l'application Tongyi. Il est gratuit et ouvert à tous les utilisateurs, offrant ainsi des possibilités plus innovantes dans les domaines de la création vidéo et de la production d'animation. Afin d'enrichir davantage l'expérience créative des utilisateurs, Tongyi App prévoit de lancer une fonction de personnage personnalisé en septembre.
Motionshop est un modèle d'IA développé par le laboratoire Tongyi et appartient au domaine actuellement populaire de l'AIGC (AI Generated Content). Ce modèle intègre une variété de technologies avancées telles que le traitement vidéo, le suivi/segmentation des personnages, l'estimation de pose, le rendu de traçage de chemin, etc., permettant aux utilisateurs de réaliser facilement la transition entre réalité et virtualité dans des vidéos dynamiques.
Avant l'émergence de Motionshop, les effets spéciaux de remplacement de personnages traditionnels reposaient principalement sur la technologie de rendu de traçage de chemin. Bien que l'effet soit réaliste, l'efficacité était faible. Si vous utilisez une solution traditionnelle de rastérisation en temps réel qui sacrifie la qualité du rendu, même si les performances seront améliorées, la qualité du rendu sera considérablement réduite.
L'application Tongyi utilise le modèle Motionshop non seulement pour améliorer l'efficacité du montage vidéo, mais également pour abaisser le seuil de création, offrant ainsi aux utilisateurs une expérience créative plus pratique et plus riche. À l'avenir, avec le lancement de la fonction de personnage personnalisé et l'itération continue de la technologie de modèle Motionshop, je pense que l'application Tongyi jouera un rôle plus important dans le domaine de l'AIGC et apportera plus de surprises aux utilisateurs.