أطلقت Kuaishou Cinemaster إطار عمل جديد من النص إلى الفيديو ، والذي يمتلك إمكانيات إدراك ثلاثية الأبعاد ويعرف باسم إصدار الفيديو من ControlNet ، مما يوفر للمستخدمين حرية إبداعية غير مسبوقة. يسمح للمستخدمين بالتحكم بدقة في الموضع والكاميرا للكائنات في الفيديو من خلال مطالبات النص وإشارات التحكم مثل خرائط العمق ، ومسارات الكاميرا ، وعلامات الكائنات ، وإشارات التحكم الأخرى ، وذلك لتحقيق تحكم دقيق في محتوى الفيديو الذي تم إنشاؤه. هذا يمثل تقنية توليد الفيديو من الذكاء الاصطناعى إلى مستوى جديد وسيحسن بشكل كبير من كفاءة إنشاء الفيديو وقدرات التعبير الإبداعي.
الميزة الأساسية ل Cinemaster هي قدرات التحكم القوية. لا يمكن للمستخدمين إنشاء مقاطع فيديو من خلال مطالبات نصية تقليدية ، ولكن أيضًا يقومون بإجراء تعديلات دقيقة بناءً على إشارات التحكم مثل خرائط العمق ومسارات الكاميرا وعلامات الكائنات ، وما إلى ذلك ، وذلك لإنشاء أعمال أكثر إبداعًا وتخصيصًا. يوفر Kuaishou أيضًا مجموعة من العمليات لاستخراج صناديق محيطة ثلاثية الأبعاد ومسارات الكاميرا من مقاطع الفيديو واسعة النطاق ، مما يوفر دعمًا قويًا للبيانات لتدريب وتطبيق Cinemaster. صفحة المشروع في Cinemaster على الإنترنت ، ويمكن للمستخدمين المهتمين زيارة Cinemaster-Dev.github.io/.
يشير ظهور Cinemaster إلى أن مجال توليد فيديو الذكاء الاصطناعي على وشك الدخول في موجة جديدة من التطوير. نتطلع إلى مستقبل Cinemaster لجلب المزيد من المفاجآت والابتكارات.