O aplicativo Tongyi do Alibaba lançou recentemente um novo recurso atraente: substituição de personagens em vídeos com um clique. Este recurso é baseado no modelo Motionshop lançado pelo Alibaba Tongyi Lab no início do ano, que recebeu ampla atenção em todo o mundo e foi integrado ao aplicativo Tongyi e está aberto gratuitamente a todos os usuários. Esta mudança reduz enormemente o limite para criação de vídeo e produção de animação, proporcionando mais possibilidades para a produção de conteúdo criativo. O artigo apresentará em detalhes as características técnicas do modelo Motionshop e os planos futuros do Tongyi App.
O Tongyi App lançou recentemente uma função inovadora de role-playing, que permite aos usuários substituir facilmente os personagens do vídeo com um clique. Este recurso se beneficia do modelo Motionshop lançado pelo Alibaba Tongyi Lab no início deste ano. Desde o seu lançamento, o modelo tem atraído grande atenção de criadores de todo o mundo.
Atualmente, o Motionshop foi comercializado e integrado ao Tongyi App, sendo gratuito e aberto a todos os usuários, permitindo possibilidades mais inovadoras nas áreas de criação de vídeo e produção de animação. Para enriquecer ainda mais a experiência criativa dos usuários, o Tongyi App planeja lançar uma função de personagem personalizado em setembro.
Motionshop é um modelo de IA desenvolvido pelo Tongyi Laboratory e pertence ao campo atualmente popular de AIGC (AI Generated Content). Este modelo integra uma variedade de tecnologias avançadas, como processamento de vídeo, rastreamento/segmentação de caracteres, estimativa de pose, renderização de rastreamento de caminho, etc., permitindo aos usuários realizar facilmente a transição entre realidade e virtualidade em vídeos dinâmicos.
Antes do surgimento do Motionshop, os efeitos especiais tradicionais de substituição de caracteres dependiam principalmente da tecnologia de renderização de rastreamento de caminho. Embora o efeito fosse realista, a eficiência era baixa. Se você usar uma solução tradicional de rasterização em tempo real que sacrifique a qualidade da renderização, embora o desempenho seja melhorado, a qualidade da renderização será bastante reduzida.
O Tongyi App usa o modelo Motionshop não apenas para melhorar a eficiência da edição de vídeo, mas também para diminuir o limite de criação, trazendo aos usuários uma experiência criativa mais conveniente e rica. No futuro, com o lançamento da função de personagem personalizado e a iteração contínua da tecnologia do modelo Motionshop, acredito que o Tongyi App desempenhará um papel maior no campo AIGC e trará mais surpresas aos usuários.