يمكن تسمية أداة توجيه إنشاء الصور/الفيديو مفتوحة المصدر ControlNeXt التي أنشأها فريق Jiajiaya الصيني في هونغ كونغ بأنها "قطعة أثرية لفقدان الوزن" في صناعة الذكاء الاصطناعي. إنه صغير الحجم، ومتوافق تمامًا مع نماذج سلسلة Stable Diffusion، وهو عبارة عن خاصية التوصيل والتشغيل، مما يبسط عملية التشغيل إلى حد كبير. يدعم ControlNeXt مجموعة متنوعة من أوضاع التحكم، مثل توجيه الحافة، والتحكم في الوضعية، والإخفاء، والتحكم في العمق، كما يمكنها التحكم الدقيق في حركات رقص الرجل الحديدي. والأكثر إثارة للدهشة هو أن سرعة التدريب وسرعة الإنشاء أسرع بكثير من ControlNet، وقد تم تحسين كفاءتها بشكل كبير.
يدعم ControlNeXt مجموعة متنوعة من أوضاع التحكم، بما في ذلك توجيه الحافة والتحكم في الوضعية والإخفاء والتحكم في العمق الميداني. ويمكنه أيضًا أن يسمح للرجل الحديدي بأن يرقص رقصة جميلة بحركات دقيقة تصل إلى أصابعه، مما يدل على قدراته القوية في التحكم.
يكمن سر فقدان الوزن في ControlNeXt في أنه يزيل بذكاء فرع التحكم في الأكل الكبير في ControlNet ويستبدله بحزمة وجبات خفيفة مكونة من عدد صغير من كتل ResNet. على الرغم من أن هذه الوحدة الصغيرة والرائعة يبلغ حجمها عُشر حجمها الأصلي فقط، إلا أنها يمكنها استخلاص ميزات ظروف التحكم المختلفة بشكل مثالي.
ليس هذا فحسب، بل يعد ControlNeXt أيضًا أداة تعليمية عبقرية. يستغرق الأمر 400 خطوة فقط لتعلم مهارة جديدة، بينما يستغرق ControlNet آلاف الخطوات. فيما يتعلق بسرعة التوليد، يعتبر ControlNeXt أفضل، حيث يوفر تأخيرًا بنسبة 10.4% فقط، بينما يتطلب ControlNet نسبة تأخير كاملة تبلغ 41.9%.
هناك مهارة فريدة أخرى في ControlNeXt وهي التطبيع المتقاطع. تشبه هذه التقنية إقامة حفلة للميزات، بحيث تكون توزيعات البيانات الخاصة بها متسقة قدر الإمكان، وبالتالي تجنب حساسية تهيئة المعلمة والسماح لشروط التحكم بالتأثير في بداية التدريب.
يشبه ControlNeXt المحول في عالم الذكاء الاصطناعي، فهو صغير ومرن لكنه قوي. فهي لا تسمح للفتاة ثنائية الأبعاد بملاءمة خطوط التحكم بشكل مثالي فحسب، بل إنها تخلق أيضًا شخصيات متقاطعة الأبعاد بأنماط مختلفة. مع هذه القطعة الأثرية، أعتقد أننا سنكون قادرين على رؤية المزيد من الأعمال الفنية المذهلة للذكاء الاصطناعي قريبًا!
الصفحة الرئيسية للمشروع: https://pbihao.github.io/projects/controlnext/index.html
يوفر برنامج ControlNeXt إمكانيات جديدة في مجال إنشاء الصور/مقاطع الفيديو بتقنية الذكاء الاصطناعي بفضل إمكانات التحكم القوية والفعالة وخفيفة الوزن. كما أن ميزاته مفتوحة المصدر تسهل على المطورين إجراء المزيد من الأبحاث والتطبيقات المتعمقة، وأعتقد أنه سيكون هناك المزيد من التطبيقات المبتكرة المستندة إلى ControlNeXt في المستقبل. نحن نتطلع إلى تألق ControlNeXt في مجال الإبداع الفني بالذكاء الاصطناعي!