La aplicación Tongyi de Alibaba lanzó recientemente una nueva característica llamativa: reemplazo de caracteres en videos con un solo clic. Esta función se basa en el modelo Motionshop lanzado por Alibaba Tongyi Lab a principios de año, que ha recibido amplia atención en todo el mundo y se ha integrado en la aplicación Tongyi y está abierto a todos los usuarios de forma gratuita. Esta medida reduce en gran medida el umbral para la creación de videos y la producción de animación, brindando más posibilidades para la producción de contenido creativo. El artículo presentará en detalle las características técnicas del modelo Motionshop y los planes futuros de la aplicación Tongyi.
La aplicación Tongyi ha lanzado recientemente una innovadora función de juego de roles que permite a los usuarios reemplazar fácilmente los personajes del vídeo con un solo clic. Esta característica se beneficia del modelo Motionshop lanzado por Alibaba Tongyi Lab a principios de este año. Desde su lanzamiento, el modelo ha atraído una gran atención por parte de creadores de todo el mundo.
En la actualidad, Motionshop se ha comercializado e integrado en la aplicación Tongyi y es gratuito y abierto a todos los usuarios, lo que permite posibilidades más innovadoras en los campos de la creación de vídeos y la producción de animación. Para enriquecer aún más la experiencia creativa de los usuarios, la aplicación Tongyi planea lanzar una función de personajes personalizados en septiembre.
Motionshop es un modelo de IA desarrollado por Tongyi Laboratory y pertenece al campo actualmente popular de AIGC (AI Generated Content). Este modelo integra una variedad de tecnologías avanzadas como procesamiento de video, seguimiento/segmentación de personajes, estimación de pose, renderizado de seguimiento de ruta, etc., lo que permite a los usuarios realizar fácilmente la transición entre la realidad y la virtualidad en videos dinámicos.
Antes de la aparición de Motionshop, los efectos especiales tradicionales de reemplazo de personajes se basaban principalmente en la tecnología de renderizado de trazado de ruta. Aunque el efecto era realista, la eficiencia era baja. Si utiliza una solución tradicional de rasterización en tiempo real que sacrifica la calidad de renderizado, aunque mejorará el rendimiento, la calidad de renderizado se reducirá considerablemente.
La aplicación Tongyi utiliza el modelo Motionshop no solo para mejorar la eficiencia de la edición de video, sino también para reducir el umbral de creación, brindando a los usuarios una experiencia creativa más conveniente y rica. En el futuro, con el lanzamiento de la función de caracteres personalizados y la iteración continua de la tecnología del modelo Motionshop, creo que la aplicación Tongyi desempeñará un papel más importante en el campo AIGC y traerá más sorpresas a los usuarios.