Tim peneliti dari Universitas Sains dan Teknologi Hong Kong dan Universitas Tsinghua bersama -sama meluncurkan Dimensionx Kerangka AI yang luar biasa, yang dapat menghasilkan adegan 3D dan 4D terperinci hanya dengan satu gambar. Teknologi terobosan ini menggunakan teknologi difusi video terkontrol untuk mengekstraksi informasi spasial dan temporal dari satu gambar dan mengubahnya menjadi bingkai video berkelanjutan, yang pada akhirnya bergabung menjadi adegan 3D atau 4D lengkap untuk pengembangan game, realitas virtual dan bidang produksi film dan televisi telah dimiliki membawa perubahan revolusioner. Dimensionx dilengkapi dengan dua alat yang kuat, s-sutradara dan s-sutradara, yang mengontrol perspektif pemandangan dan pergerakan objek masing-masing, mencapai kontrol yang akurat dari pemandangan, dan bahkan dapat digunakan dalam kombinasi untuk menghasilkan yang lebih kompleks dan realistis adegan.
Tim Peneliti dari Universitas Sains dan Teknologi Hong Kong dan Universitas Tsinghua telah meluncurkan kerangka kerja AI baru yang disebut Dimensionx, yang dapat menghasilkan adegan 3D dan 4D terperinci dengan hanya satu gambar, membawa bidang pengembangan game, realitas virtual dan film dan televisi Produksi.
Keajaiban inti Dimensionx adalah teknologi difusi video yang dapat dikendalikan. Ini seperti "pesulap luar angkasa" yang terampil yang dapat mengekstraksi informasi spasial dan temporal dari satu gambar dan mengubahnya menjadi bingkai video berkelanjutan.
Bingkai video ini seperti film film, merekam berbagai sudut dan perubahan dinamis adegan, dan akhirnya menggabungkannya menjadi adegan 3D atau 4D yang lengkap.
Untuk mengontrol "sihir luar angkasa" secara akurat, Dimensionx juga dilengkapi dengan dua "tongkat sihir" yang kuat: s-sutradara dan s-sutradara. S-Direktur bertanggung jawab atas dimensi spasial dan dapat mengontrol pergerakan perspektif, sama seperti Anda dengan bebas sharple melalui adegan dengan kamera Anda.
T-direktur bertanggung jawab atas dimensi waktu, yang dapat mengontrol pergerakan objek dan membuat adegan "hidup".
Yang lebih menakjubkan adalah bahwa Dimensionx juga dapat menggabungkan dua "tongkat sihir" ini untuk menghasilkan adegan yang lebih kompleks dan realistis!
Misalnya, Anda dapat membuat sudut pandang berputar di sekitar objek saat objek bergerak, sama seperti Anda berada di dunia 4D yang nyata!
Tentu saja, "sihir" Dimensionx lebih dari itu. Ini juga dioptimalkan untuk adegan nyata, seperti merancang mekanisme persepsi lintasan, yang dapat menangani berbagai gerakan kamera yang kompleks, membuat adegan 3D yang dihasilkan lebih realistis dan dapat dipercaya.
Selain itu, Dimensionx juga telah memperkenalkan strategi denoising pemeliharaan identitas, yang dapat memastikan konsistensi penampilan objek dalam adegan 4D dan menghindari situasi memalukan "kehancuran".
Munculnya Dimensionx tidak diragukan lagi membawa terobosan revolusioner ke bidang generasi adegan 3D dan 4D. Ini tidak hanya memiliki operasi sederhana dan efek luar biasa, tetapi juga memiliki berbagai aplikasi dan dapat digunakan di banyak bidang seperti pengembangan game, realitas virtual, produksi film dan televisi. Saya percaya bahwa dalam waktu dekat, Dimensionx akan membawa kita ke dunia yang lebih menarik dari "Space Magic"!
Alamat Proyek: https://chenshuo20.github.io/dimensionx/
Alamat kertas: https://arxiv.org/pdf/2411.04928
Dengan operasinya yang sederhana, efek luar biasa dan prospek aplikasi yang luas, Dimensionx telah membawa terobosan revolusioner ke bidang generasi adegan 3D dan 4D.