O modelo de geração de vídeo AI do Alibaba, Tongyi Wanxiang, recebeu uma grande atualização para a versão 2.1. Esta atualização lançou uma versão rápida e uma versão profissional, com foco em desempenho eficiente e excelente expressão, respectivamente. A nova versão fez progressos significativos no processamento de movimentos complexos, restaurando leis físicas reais e melhorando a qualidade dos filmes de vídeo. Ela resolve efetivamente o problema de "pintura fantasma" que era comum na geração anterior de vídeo de IA e atinge a geração precisa de vídeos chineses e. Texto em inglês. Mais importante ainda, a versão 2.1 do Tongyi Wanxiang também atingiu um novo patamar em termos de operação da lente e pode ajustar automaticamente a lente de acordo com instruções simples para criar um efeito visual mais artístico.
A característica mais atraente desta atualização é o progresso significativo do modelo no processamento de movimentos complexos e na restauração de leis físicas reais, especialmente na melhoria da qualidade cinematográfica dos vídeos e na otimização da capacidade de seguir instruções. O novo modelo aumenta muito as possibilidades de criação artística de IA e oferece aos usuários mais espaço criativo.
Em aplicações práticas, o desempenho do Tongyi Wanxiang também é surpreendente. Por exemplo, pedi a Tongyi para gerar uma imagem de um gatinho cortando pepinos. Você pode ver que o vídeo mostra o gatinho cortando pepinos na cozinha de forma muito coerente. A lâmina corta lentamente e as fatias de pepino caem. Os detalhes são muito melhores do que a geração anterior do modelo de vídeo.
Além disso, a versão mais recente do Tongyi Wanxiang também resolveu com sucesso o problema da "pintura fantasma" que era comum na geração anterior de vídeo de IA e alcançou pela primeira vez a geração precisa de texto em chinês e inglês. Por exemplo, um gatinho está digitando na frente do teclado e legendas como “Não há comida para comer” aparecem na tela, cheias de humor. Também pode implementar a aplicação de fontes de efeitos especiais em diversas cenas, agregando mais criatividade ao vídeo.
Em termos de movimentos complexos de personagens, Tongyi Wanxiang também mostrou fortes capacidades. Quer seja uma menina esquiando ou um homem correndo, os movimentos são suaves e naturais, seguindo leis físicas reais. Os vídeos gerados por IA não são apenas vívidos e detalhados, mas também simulam efeitos de movimento convincentes.
Vale ressaltar que esta atualização também permite que Tongyi Wanxiang atue como um mestre do cinema em termos de movimento de câmera. Depois de inserir instruções simples, o sistema pode ajustar automaticamente a lente para produzir efeitos como foco e redução de zoom, o que melhora muito a arte do vídeo. Por exemplo, a apresentação de uma banda de rock avança pela câmera, destacando o comportamento do guitarrista, fazendo com que as pessoas se sintam como se estivessem no local da apresentação.
A grande atualização do Tongyi Wanxiang versão 2.1 não apenas melhora o nível técnico de geração de vídeo, mas também fornece aos usuários ferramentas criativas mais ricas, marcando um novo capítulo na tecnologia de geração de vídeo AI.
Endereço do site oficial: https://tongyi.aliyun.com/wanxiang/videoCreation
A atualização do Tongyi Wanxiang versão 2.1 demonstra a forte força do Alibaba no campo de geração de vídeo de IA e traz aos usuários ferramentas criativas mais convenientes e poderosas. A sua melhoria no processamento de detalhes e na expressão artística promoverá ainda mais a aplicação e o desenvolvimento da tecnologia de geração de vídeo de IA, e vale a pena esperar por mais inovações no futuro.