Le modèle de génération vidéo AI d'Alibaba, Tongyi Wanxiang, a reçu une mise à jour majeure vers la version 2.1. Cette mise à niveau a lancé une version rapide et une version professionnelle, axées respectivement sur des performances efficaces et une excellente expression. La nouvelle version a fait des progrès significatifs dans le traitement des mouvements complexes, la restauration des lois physiques réelles et l'amélioration de la qualité des films vidéo. Elle résout efficacement le problème de « peinture fantôme » qui était courant dans la génération précédente de vidéos IA et permet une génération précise du chinois et du chinois. Texte anglais. Plus important encore, la version 2.1 de Tongyi Wanxiang a également atteint un nouveau niveau en termes de fonctionnement de l'objectif et peut ajuster automatiquement l'objectif selon des instructions simples pour créer un effet visuel plus artistique.
La caractéristique la plus frappante de cette mise à niveau réside dans les progrès significatifs du modèle dans le traitement de mouvements complexes et la restauration des lois physiques réelles, notamment en améliorant la qualité cinématographique des vidéos et en optimisant la capacité à suivre les instructions. Le nouveau modèle augmente considérablement les possibilités de création artistique de l'IA et offre aux utilisateurs plus d'espace créatif.
Dans les applications pratiques, les performances de Tongyi Wanxiang sont également assez étonnantes. Par exemple, j'ai demandé à Tongyi de générer une image d'un chaton coupant des concombres. Vous pouvez voir que la vidéo montre le chaton coupant des concombres dans la cuisine de manière très cohérente. La lame coupe lentement et les tranches de concombre tombent. Les détails sont bien meilleurs que la génération précédente de modèles vidéo.
En outre, la dernière version de Tongyi Wanxiang a également résolu avec succès le problème de « peinture fantôme » qui était courant dans la génération précédente de vidéo IA et a permis pour la première fois de générer avec précision du texte en chinois et en anglais. Par exemple, un chaton tape devant le clavier et des sous-titres tels que « Pas de nourriture à manger » apparaissent à l'écran, pleins d'humour. Il peut également mettre en œuvre l'application de polices d'effets spéciaux dans diverses scènes, ajoutant ainsi plus de créativité à la vidéo.
En termes de mouvements de personnages complexes, Tongyi Wanxiang a également montré de solides capacités. Qu'il s'agisse d'une fille qui skie ou d'un homme qui court, les mouvements sont fluides et naturels, suivant de véritables lois physiques. Les vidéos générées par l’IA sont non seulement vives et détaillées, mais simulent également des effets de mouvement convaincants.
Il convient de mentionner que cette mise à niveau permet également à Tongyi Wanxiang de se comporter comme un maître du cinéma en termes de mouvements de caméra. Après avoir saisi des instructions simples, le système peut ajuster automatiquement l'objectif pour produire des effets tels que la mise au point et le zoom arrière, ce qui améliore considérablement le côté artistique de la vidéo. Par exemple, la performance d'un groupe de rock est diffusée via la caméra, mettant en valeur le comportement du guitariste, donnant aux gens l'impression d'être sur le lieu de la représentation.
La mise à niveau majeure de Tongyi Wanxiang version 2.1 améliore non seulement le niveau technique de génération vidéo, mais fournit également aux utilisateurs des outils créatifs plus riches, marquant ainsi un nouveau chapitre dans la technologie de génération vidéo IA.
Adresse du site officiel : https://tongyi.aliyun.com/wanxiang/videoCreation
La mise à niveau de Tongyi Wanxiang version 2.1 démontre la forte force d'Alibaba dans le domaine de la génération de vidéos IA et offre aux utilisateurs des outils de création plus pratiques et plus puissants. Son amélioration du traitement des détails et de l'expression artistique favorisera davantage l'application et le développement de la technologie de génération vidéo IA, et il vaut la peine d'attendre avec impatience davantage d'innovations à l'avenir.