El modelo de generación de video AI de Alibaba, Tongyi Wanxiang, recibió una actualización importante a la versión 2.1. Esta actualización lanzó una versión rápida y una versión profesional, centrándose en un rendimiento eficiente y una expresión excelente, respectivamente. La nueva versión ha logrado avances significativos en el procesamiento de movimientos complejos, la restauración de leyes físicas reales y la mejora de la calidad de las películas de video. Resuelve efectivamente el problema de la "pintura de fantasmas" que era común en la generación anterior de videos de IA y logra una generación precisa de chino y chino. Texto en inglés. Más importante aún, la versión 2.1 de Tongyi Wanxiang también ha alcanzado una nueva altura en términos de operación de la lente y puede ajustar la lente automáticamente de acuerdo con instrucciones simples para crear un efecto visual más artístico.
La característica más llamativa de esta actualización es el progreso significativo del modelo en el procesamiento de movimientos complejos y la restauración de leyes físicas reales, especialmente en la mejora de la calidad cinematográfica de los videos y la optimización de la capacidad de seguir instrucciones. El nuevo modelo aumenta enormemente las posibilidades de creación artística con IA y proporciona a los usuarios más espacio creativo.
En aplicaciones prácticas, el rendimiento de Tongyi Wanxiang también es bastante sorprendente. Por ejemplo, le pedí a Tongyi que generara una imagen de un gatito cortando pepinos. Puedes ver que el video muestra al gatito cortando pepinos en la cocina de manera muy coherente. La cuchilla corta lentamente y las rodajas de pepino se caen. Los detalles son mucho mejores que los de la generación anterior del modelo de vídeo.
Además, la última versión de Tongyi Wanxiang también resolvió con éxito el problema de la "pintura fantasma" que era común en la generación anterior de videos de IA y logró una generación precisa de texto en chino e inglés por primera vez. Por ejemplo, un gatito está escribiendo frente al teclado y en la pantalla aparecen subtítulos como "No hay comida para comer", que están llenos de humor. También puede implementar la aplicación de fuentes de efectos especiales en varias escenas, añadiendo más creatividad al vídeo.
En términos de movimientos complejos de personajes, Tongyi Wanxiang también ha demostrado grandes capacidades. Ya sea una niña esquiando o un hombre corriendo, los movimientos son suaves y naturales, siguiendo leyes físicas reales. Los vídeos generados por IA no sólo son vívidos y detallados, sino que también simulan efectos de movimiento convincentes.
Vale la pena mencionar que esta actualización también permite a Tongyi Wanxiang actuar como un maestro de cine en términos de movimiento de cámara. Después de ingresar instrucciones simples, el sistema puede ajustar automáticamente la lente para producir efectos como enfocar y alejar, lo que mejora enormemente el arte del video. Por ejemplo, la actuación de una banda de rock avanza a través de la cámara, resaltando el comportamiento del guitarrista y haciendo que la gente se sienta como si estuviera en el lugar de la actuación.
La importante actualización de la versión 2.1 de Tongyi Wanxiang no solo mejora el nivel técnico de generación de video, sino que también proporciona a los usuarios herramientas creativas más ricas, lo que marca un nuevo capítulo en la tecnología de generación de video con IA.
Dirección del sitio web oficial: https://tongyi.aliyun.com/wanxiang/videoCreation
La actualización de la versión 2.1 de Tongyi Wanxiang demuestra la gran fortaleza de Alibaba en el campo de la generación de videos con IA y brinda a los usuarios herramientas creativas más convenientes y poderosas. Su mejora en el procesamiento de detalles y la expresión artística promoverá aún más la aplicación y el desarrollo de la tecnología de generación de video con IA, y vale la pena esperar más innovaciones en el futuro.