¡El editor de Downcodes lo llevará a comprender la última tecnología ReCapture lanzada por Google Research! Esta asombrosa tecnología reinterpreta tus videos desde una perspectiva completamente nueva, brindándote una experiencia de visualización sin precedentes. No se trata de una simple edición de vídeo, sino que utiliza tecnología de inteligencia artificial para generar una nueva versión con trayectorias de cámara personalizadas basadas en el vídeo que proporcionas, lo que hace que parezca que tienes la capacidad de disparar desde varias cámaras, incluso para vídeos diarios grabados con tu teléfono móvil. También puede tener un efecto de película. ¿Estás listo? ¡Exploremos juntos la magia de ReCapture!
Google Research lanzó recientemente una nueva tecnología llamada ReCapture, que le permite volver a experimentar sus propios vídeos desde una nueva perspectiva. La tecnología ReCapture puede generar una nueva versión con pistas de cámara personalizadas basadas en el video proporcionado por el usuario, lo que significa que puede ver el contenido del video desde una perspectiva que no se encuentra en el video original y aún mantener el movimiento original de los personajes y escenas en el vídeo.
ReCapture es como un editor mágico que puede generar una nueva versión con una nueva perspectiva basada en el vídeo que proporcionas. Por ejemplo, si grabas un vídeo de un perro jugando con tu teléfono móvil, ReCapture puede ayudarte a generar un vídeo tomado desde la perspectiva del perro.
Entonces, ¿cómo logra ReCapture esta "magia"? De hecho, el principio detrás de esto no es complicado. Primero utiliza un modelo de difusión de vistas múltiples o tecnología de representación de nube de puntos para generar un video preliminar basado en la nueva perspectiva que desea. Este video en bruto es como un jade sin pulir, la imagen puede estar incompleta, el tiempo puede ser inconsistente y puede balancearse como un borracho.
A continuación, ReCapture utilizará su arma secreta: la tecnología de "ajuste de vídeo de máscara" para "pulir finamente" este vídeo en bruto. Esta tecnología es como un hábil artesano que utiliza dos herramientas especiales: LoRA espacial y LoRA temporal para reparar y optimizar el video. Spatial LoRA es como una "esteticista", responsable de aprender los personajes y la información de la escena en el video original para hacer la imagen más clara y hermosa. Time LoRA es un "maestro del ritmo" responsable de aprender los movimientos de la escena desde nuevas perspectivas para hacer que la reproducción de video sea más fluida y natural.
Gracias a los esfuerzos conjuntos de estos dos "maestros", el primer vídeo se transformó en un nuevo vídeo claro, coherente y dinámico. No solo eso, para que el efecto del video sea más perfecto, ReCapture también usará la tecnología SDEdit para agregar toques finales al video, como maquillaje, haciendo el video más refinado y delicado.
Los investigadores de Google dicen que ReCapture puede manejar varios tipos de videos y transiciones de perspectiva sin requerir grandes cantidades de datos de entrenamiento. Esto significa que incluso si usted es un simple entusiasta de los videos, puede crear fácilmente videos "multicámara" de nivel profesional con ReCapture.
Dirección del proyecto: https://generative-video-camera-controls.github.io/
Sin duda, la aparición de la tecnología ReCapture ha traído nuevas posibilidades al campo de la creación de vídeos. Simplifica el proceso de producción de videos de múltiples vistas, permitiendo que más personas experimenten fácilmente el placer de la creación. ¡Creo que en el futuro ReCapture se aplicará en más campos y nos traerá más sorpresas!