La dernière technologie de recapture publiée par Google Research Institute a apporté l'innovation dans le domaine de l'édition vidéo. Il peut générer une nouvelle version avec une piste de caméra personnalisée basée sur des vidéos existantes, permettant la visualisation du contenu vidéo sous différentes perspectives, tout en conservant parfaitement l'état de mouvement original des personnages et des scènes de la vidéo originale. Cette technologie est comme la magie, qui peut transformer une vidéo ordinaire en images passionnantes sous plusieurs angles et perspectives.
Google Research a récemment lancé une nouvelle technologie appelée Recapture, qui vous permet de repeindre vos propres vidéos dans une perspective complètement nouvelle. La technologie de recapture peut générer une nouvelle version avec une piste de caméra personnalisée basée sur la vidéo fournie par l'utilisateur, ce qui signifie que vous pouvez regarder le contenu vidéo dans une perspective qui n'est pas disponible dans la vidéo originale, et également maintenir le mouvement original des personnages et des scènes de la vidéo.
La recapture est comme un éditeur magique qui peut générer une nouvelle version avec une toute nouvelle perspective basée sur les vidéos que vous fournissez. Par exemple, si vous avez pris une vidéo d'un chien jouant avec votre téléphone portable, la recapture peut vous aider à générer une vidéo prise du point de vue du chien.
Alors, comment la recapture impose-t-elle exactement cette "magie"? Il utilise d'abord le modèle de diffusion multi-vues ou la technologie de rendu de cloud de points pour générer une vidéo approximative basée sur la nouvelle perspective que vous souhaitez. Cette vidéo rugueuse est comme un morceau de jade non garanti.
Ensuite, Recapture utilisera son arme secrète - la technologie "Mask Video Fineing" pour "artisanat exquise" cette vidéo rugueuse. Cette technologie est comme un artisan qualifié qui peut réparer et optimiser des vidéos avec deux outils spéciaux - Space Lora et Time Lora. Space Lora est comme une "esthéticienne" qui est responsable de l'apprentissage des personnages et des informations sur la scène dans la vidéo originale, ce qui rend l'image plus claire et plus belle. Time Lora est un "maître du rythme" qui est responsable de l'apprentissage du mouvement de la scène dans une nouvelle perspective pour rendre la lecture vidéo plus douce et naturelle.
Après la création conjointe de ces deux "maîtres", la vidéo rugueuse a été transformée en une nouvelle vidéo claire, cohérente et dynamique. Non seulement que, afin de rendre la vidéo plus parfaite, la recapture utilisera également la technologie SDEdit pour terminer la vidéo, tout comme le maquillage, ce qui rend la vidéo plus délicate et plus délicate.
Les chercheurs de Google disent que la recapture peut gérer divers types de conversions vidéo et de point de vue sans nécessiter de nombreuses données de formation. Cela signifie que même si vous n'êtes qu'un passionné de vidéo ordinaire, vous pouvez facilement créer des vidéos "multi-caméras" de qualité professionnelle avec recapture.
Adresse du projet: https://generative-video-camera-controls.github.io/
Avec ses fonctionnalités simples et faciles à utiliser et ses fonctions puissantes, la recapture a considérablement réduit le seuil de production vidéo multi-visualités, offrant de nouvelles possibilités de création vidéo. À l'avenir, cette technologie peut être largement utilisée dans la production de films, le développement de jeux et les domaines de la réalité virtuelle, apportant une expérience visuelle plus immersive.