Teknologi Animate Animate Anyone2 terbaru Alibaba telah menyadari penggantian karakter video yang akurat, dan kemajuan terobosannya telah menarik perhatian luas. Teknologi ini dapat menggantikan gambar karakter target ke dalam video secara real time berdasarkan mempertahankan aksi video asli, dan mendukung penyesuaian pencahayaan dan adaptasi lingkungan latar belakang untuk mencapai fusi mendalam antara karakter dan adegan. Inti dari teknologi ini terletak pada teknologi pengikatan kerangka yang dinamis dan strategi masking independen-bentuk, yang dapat secara akurat menangkap gerakan manusia dan ekspresi wajah, dan secara efektif menggambarkan hubungan antara karakter dan lingkungan, dengan demikian menghasilkan efek animasi yang sangat realistis.
Baru -baru ini, Alibaba merilis pencapaian teknologi terbarunya, Animate Anyone2, yang merupakan teknologi terobosan yang dapat memungkinkan penggantian karakter video yang akurat. Menurut tampilan kasus yang dirilis di situs web resmi proyek, pengguna hanya perlu memberikan video asli dan gambar karakter target, dan sistem dapat menyelesaikan penggantian gambar karakter secara real-time berdasarkan mempertahankan lintasan aksi video asli .
Data eksperimental menunjukkan bahwa sistem dapat sepenuhnya memigrasi gerakan menembak pemain sepak bola ke karakter animasi, sambil mempertahankan karakteristik fisik nyata dari lintasan gerakan bola. Menanggapi kebutuhan kompleks produksi film dan televisi, sistem ini juga mendukung penyesuaian pencahayaan khusus dan adaptasi lingkungan latar belakang untuk mencapai integrasi karakter dan adegan yang mendalam.
Teknologi pengikat tulang dinamis yang dilengkapi dengan sistem ini dapat secara akurat menangkap lintasan gerakan anggota badan dan ekspresi mikro wajah dengan secara akurat melacak 28 titik tulang utama dalam tubuh manusia. Dalam video uji publik, apakah itu rotasi terus menerus penari atau manuver cepat dalam seni bela diri, karakter yang diganti dapat mempertahankan konsistensi gerakan.
Pada tingkat teknis, sistem mengadopsi strategi topeng independen-bentuk yang dapat lebih efektif menggambarkan hubungan antara peran dan lingkungan. Pada saat yang sama, untuk meningkatkan interaksi antara karakter dan objek di sekitarnya, menghidupkan siapa pun2 memperkenalkan panduan objek yang ringan. Panduan ini bertanggung jawab untuk mengekstraksi fitur objek yang berinteraksi dengan karakter dan menyuntikkan fitur -fitur ini ke dalam proses denoising melalui teknik fusi spasial. Desain ini membuat interaksi karakter dengan lingkungan dan objek tampak lebih halus dan lebih realistis saat bergerak.
Hasil eksperimen menunjukkan bahwa menghidupkan siapa pun2 berkinerja baik dalam menghasilkan animasi karakter yang dapat disesuaikan dengan lingkungan. Dibandingkan dengan produk serupa di pasaran saat ini, seperti Viggle dan Mimo, menghidupkan siapa pun2 menunjukkan tingkat konsistensi karakter yang lebih tinggi, retensi detail dan keaslian interaksi. Ini menandai pengembangan teknologi animasi karakter ke tingkat yang baru.
Dengan peluncuran Animate siapa pun2, potensi aplikasi animasi karakter di berbagai bidang seperti game, produksi film dan televisi dan realitas virtual telah diperluas lebih lanjut. Ini tidak hanya menyediakan alat yang lebih kuat untuk produser animasi, tetapi juga membawa pengalaman visual yang lebih jelas dan realistis bagi penonton.
Proyek: https://humanaigc.github.io/animate-anyone-2/
Poin -Poin Kunci:
Animasi siapa pun2 menangkap karakteristik lingkungan untuk mewujudkan interaksi nyata antara karakter dan lingkungan.
Teknologi baru memperkenalkan panduan objek dan fusi ruang untuk meningkatkan interaksi antara karakter dan objek.
Dibandingkan dengan teknologi yang sama, animasi siapa pun2 menunjukkan keunggulan yang jelas secara rinci dan konsistensi.
Singkatnya, dengan teknologi canggih dan kinerja yang luar biasa, menghidupkan siapa pun2 telah menetapkan tolok ukur baru untuk teknologi animasi karakter dan telah menunjukkan prospek aplikasi yang sangat besar di bidang game, film, dan televisi, dan layak dinantikan untuk pengembangan dan penerapannya di masa depan.