Stability AI lançou recentemente uma tecnologia inovadora de processamento de vídeo, Stable Video4D. Esta tecnologia pode converter um vídeo de visualização única em oito vídeos de ângulos diferentes, trazendo possibilidades sem precedentes para a criação de vídeo. O surgimento desta tecnologia marca uma grande mudança na tecnologia de geração de vídeo, da geração baseada em imagem para a síntese de vídeo totalmente dinâmica em 3D, trazendo novas oportunidades de desenvolvimento para áreas como desenvolvimento de jogos, edição de vídeo e realidade virtual. O Stable Video4D é baseado no modelo anterior de Stable Video Diffusion do Stability AI e o aprimora significativamente para permitir que ele lide com dados de vídeo mais complexos e gere vídeos multivisualização mais realistas e suaves.
Recentemente, a Stability AI anunciou o lançamento de uma tecnologia revolucionária de processamento de vídeo – Stable Video4D. Esta tecnologia é capaz de converter um vídeo de uma única perspectiva em um vídeo de nova perspectiva de 8 ângulos diferentes, proporcionando aos criadores flexibilidade e criatividade sem precedentes.
Stable Video4D baseia-se no modelo Stable Video Diffusion lançado anteriormente pela empresa. Em vez de converter imagens em vídeos, o novo modelo pode receber entrada de vídeo e gerar saída de vídeo a partir de múltiplas novas perspectivas, alcançando um grande salto da geração de vídeo baseada em imagem para a síntese de vídeo totalmente dinâmica em 3D.
A Stability AI disse que o Stable Video4D está atualmente em fase de pesquisa e deverá ser amplamente utilizado em áreas como desenvolvimento de jogos, edição de vídeo e realidade virtual no futuro. A empresa está otimizando ativamente o modelo para lidar com uma gama mais ampla de vídeos do mundo real.
O Stable Video4D já está disponível na plataforma Hugging Face. A Stability AI espera avançar ainda mais no potencial desta tecnologia para criar vídeos realistas em vários ângulos por meio de pesquisa e desenvolvimento contínuos. A empresa continuará a trabalhar com pesquisadores, especialistas e a comunidade para impulsionar a inovação tecnológica e melhorar continuamente o desempenho do modelo.
Endereço do modelo: https://huggingface.co/stabilityai/sv4d
O lançamento de código aberto do Stable Video4D promoverá enormemente o avanço da tecnologia de geração de vídeo e promoverá sua aplicação em mais campos. Esperamos ver o desenvolvimento e a aplicação desta tecnologia no futuro, trazendo-nos uma experiência audiovisual mais emocionante.