A mais recente tecnologia de recaptura lançada pelo Google Research Institute trouxe inovação ao campo da edição de vídeo. Ele pode gerar uma nova versão com uma faixa de câmera personalizada com base nos vídeos existentes, permitindo a visualização de conteúdo de vídeo de diferentes perspectivas, mantendo perfeitamente o estado de movimento original de personagens e cenas no vídeo original. Essa tecnologia é como mágica, que pode transformar um vídeo comum em imagens emocionantes de vários ângulos e perspectivas.
O Google Research lançou recentemente uma nova tecnologia chamada Recapture, que permite reexperiência de seus próprios vídeos de uma perspectiva completamente nova. A tecnologia Recapture pode gerar uma nova versão com uma faixa de câmera personalizada com base no vídeo fornecido pelo usuário, o que significa que você pode assistir ao conteúdo do vídeo de uma perspectiva que não está disponível no vídeo original e também manter o movimento original dos personagens e cenas no vídeo.
A Recapture é como um editor mágico que pode gerar uma nova versão com uma perspectiva completamente nova com base nos vídeos que você fornece. Por exemplo, se você fez um vídeo de um cachorro tocando com seu celular, a recuperação pode ajudá -lo a gerar um vídeo tirado da perspectiva do cachorro.
Então, como exatamente a recuperação implementa essa "mágica"? Primeiro, ele usa o modelo de difusão com várias visões ou a tecnologia de renderização em nuvem de pontos para gerar um vídeo difícil com base na nova perspectiva que você deseja. Este vídeo áspero é como um pedaço de jade não severa.
Em seguida, a Recapture usará sua arma secreta - a tecnologia "Máscara de ajuste fino de vídeo" para "criar requintada" este vídeo difícil. Essa tecnologia é como um artesão qualificado que pode reparar e otimizar vídeos com duas ferramentas especiais - Space Lora e Time Lora. O Space Lora é como uma "esteticista" responsável por aprender os personagens e as informações da cena no vídeo original, tornando a imagem mais clara e mais bonita. O Time Lora é um "mestre de ritmo", responsável por aprender o movimento da cena de uma nova perspectiva para tornar a reprodução de vídeo mais suave e natural.
Após a criação conjunta desses dois "mestres", o vídeo áspero foi transformado em um novo vídeo claro, coerente e dinâmico. Não apenas isso, para tornar o vídeo mais perfeito, a recuperação também usará a tecnologia SDEDIT para terminar o vídeo, assim como a maquiagem, tornando o vídeo mais delicado e delicado.
Pesquisadores do Google dizem que a recaptura pode lidar com vários tipos de conversões de vídeo e ponto de vista sem exigir muitos dados de treinamento. Isso significa que, mesmo se você for apenas um entusiasta de vídeo comum, pode criar facilmente vídeos de "várias câmeras" de nível profissional com recuperação.
Endereço do projeto: https://generative-video-camera-controls.github.io/
Com seus recursos simples e fáceis de usar e funções poderosas, a Recapture reduziu bastante o limite para a produção de vídeo em várias visualizações, fornecendo novas possibilidades para a criação de vídeo. No futuro, essa tecnologia pode ser amplamente utilizada na produção de filmes, desenvolvimento de jogos e campos de realidade virtual, trazendo uma experiência visual mais imersiva.