Editor Downcodes akan membawa Anda memahami teknologi ReCapture terbaru yang dirilis oleh Google Research! Teknologi luar biasa ini menafsirkan ulang video Anda dari perspektif baru, memberi Anda pengalaman menonton yang belum pernah terjadi sebelumnya. Ini bukan pengeditan video sederhana, tetapi menggunakan teknologi AI untuk menghasilkan versi baru dengan lintasan kamera yang disesuaikan berdasarkan video yang Anda berikan, membuat Anda seolah-olah memiliki kemampuan untuk memotret dari beberapa kamera, bahkan untuk video harian yang direkam dengan ponsel Anda. . Ini juga dapat memiliki efek seperti film. Apakah kamu siap? Mari jelajahi keajaiban ReCapture bersama-sama!
Google Research baru-baru ini meluncurkan teknologi baru yang disebut ReCapture, yang memungkinkan Anda menikmati kembali video Anda dari perspektif baru. Teknologi ReCapture dapat menghasilkan versi baru dengan trek kamera yang disesuaikan berdasarkan video yang disediakan oleh pengguna, yang berarti Anda dapat menonton konten video dari sudut pandang yang tidak ditemukan dalam video aslinya, dan tetap mempertahankan pergerakan asli karakter dan adegan di dalamnya. videonya.
ReCapture seperti editor ajaib yang dapat menghasilkan versi baru dengan perspektif segar berdasarkan video yang Anda berikan. Misalnya, jika Anda merekam video seekor anjing yang sedang bermain dengan ponsel Anda, ReCapture dapat membantu Anda membuat video yang diambil dari sudut pandang anjing tersebut.
Jadi, bagaimana ReCapture mencapai "keajaiban" ini Sebenarnya, prinsip di baliknya tidaklah rumit. Pertama-tama, model difusi multi-tampilan atau teknologi rendering point cloud digunakan untuk menghasilkan video kasar berdasarkan perspektif baru yang Anda inginkan. Video kasar ini seperti batu giok yang belum dipoles, gambarnya mungkin tidak lengkap, waktunya mungkin tidak konsisten, dan mungkin bergoyang seperti orang mabuk.
Selanjutnya, ReCapture akan menggunakan senjata rahasianya – teknologi “mask video fine-tuning” untuk “memoles secara halus” video kasar ini. Teknologi ini seperti seorang pengrajin terampil yang menggunakan dua alat khusus - LoRA spasial dan LoRA temporal untuk memperbaiki dan mengoptimalkan video. LoRA Spasial ibarat seorang "ahli kecantikan", yang bertugas mempelajari karakter dan informasi adegan dalam video aslinya agar gambarnya lebih jelas dan indah. Time LoRA adalah "ahli ritme" yang bertanggung jawab untuk mempelajari gerakan adegan dari perspektif baru untuk membuat pemutaran video lebih lancar dan alami.
Melalui upaya bersama kedua “empu” ini, video kasar tersebut diubah menjadi video baru yang jelas, koheren, dan dinamis. Tak hanya itu, agar efek video menjadi lebih sempurna, ReCapture juga akan menggunakan teknologi SDEdit untuk menambahkan sentuhan akhir pada video, layaknya riasan, sehingga video menjadi lebih halus dan halus.
Peneliti Google mengatakan ReCapture dapat menangani berbagai jenis video dan transisi perspektif tanpa memerlukan data pelatihan dalam jumlah besar. Artinya, meskipun Anda hanya seorang penggila video biasa, Anda dapat dengan mudah membuat video "multi-kamera" kelas profesional dengan ReCapture.
Alamat proyek: https://generative-video-camera-controls.github.io/
Kemunculan teknologi ReCapture tidak diragukan lagi membawa kemungkinan-kemungkinan baru dalam bidang pembuatan video. Ini menyederhanakan proses produksi video multi-tayangan, memungkinkan lebih banyak orang merasakan kegembiraan berkreasi dengan mudah. Saya yakin di masa depan, ReCapture akan diterapkan di lebih banyak bidang dan memberikan lebih banyak kejutan!