في السنوات الأخيرة، كان هناك طلب متزايد على تكنولوجيا معالجة الصور الآلية في مجال الفن الرقمي. اقترح فريق البحث من جامعة تسينغهوا ومختبر Tencent ARC نموذجًا جديدًا يسمى ColorFlow لحل مشكلة تلوين تسلسلات الصور بالأبيض والأسود. ويهدف هذا النموذج إلى حل المشكلة الصعبة المتمثلة في تلوين تسلسلات الصور بالأبيض والأسود مع الحفاظ على هوية الشخصيات والأشياء، وهو ما له آثار عملية مهمة على صناعات مثل القصص المصورة والرسوم المتحركة. لا يعمل نموذج ColorFlow على تحسين كفاءة وجودة التلوين فحسب، بل يعمل أيضًا على تبسيط عملية توليد الألوان المعقدة، مما يوفر إمكانيات جديدة لإنشاء الفن الرقمي.
مع تطور الفن الرقمي، اجتذبت تكنولوجيا معالجة الصور الآلية اهتمامًا متزايدًا. في الآونة الأخيرة، اقترح فريق بحث من جامعة تسينغهوا ومختبر Tencent ARC نموذجًا جديدًا لتلوين تسلسل الصور يسمى ColorFlow. يهدف هذا النموذج إلى حل مشكلة الحفاظ على اتساق هوية الشخصيات والأشياء أثناء تلوين تسلسلات الصور بالأبيض والأسود، مما يلبي الاحتياجات العملية لصناعات مثل القصص المصورة والرسوم المتحركة.
ColorFlow هو إطار عمل قائم على الانتشار ثلاثي المراحل يعمل على الاستفادة من المعلومات السياقية لإنشاء ألوان بدقة لتسلسلات الصور بالأبيض والأسود من مجموعة من الصور المرجعية. على سبيل المثال، يمكن للنموذج تلوين لون شعر الشخصية وملابسها بشكل فعال، مما يضمن تناسق الألوان مع الصور المرجعية. على عكس التقنيات السابقة التي كانت تتطلب ضبطًا دقيقًا لكل دور، يعمل ColorFlow على تبسيط عملية إنشاء الألوان من خلال مسار ألوان مبتكر معزز بالبحث مع إمكانات تعميم قوية.
تم تصميم النموذج بفرعين رئيسيين: أحدهما لاستخراج هوية اللون، والآخر مسؤول عن عملية التلوين الفعلية. يستفيد هذا التصميم ثنائي الفرع استفادة كاملة من نموذج الانتشار وهو قادر على تحقيق تعلم قوي للسياق ومطابقة هوية الألوان من خلال آلية الاهتمام الذاتي. من أجل التحقق من فعالية ColorFlow، أطلق فريق البحث أيضًا ColorFlow-Bench، وهو اختبار مرجعي شامل مخصص لمهام التلوين المرجعية المستندة إلى الصور.
في التجارب المقارنة، تجاوزت ColorFlow النماذج المتقدمة الموجودة في مؤشرات متعددة، وأظهرت جودة جمالية أعلى، وأنتجت ألوانًا أقرب إلى الصورة الأصلية. أظهر فريق البحث تأثيرات تطبيق ColorFlow في سيناريوهات فنية مختلفة، بما في ذلك الرسوم الهزلية بالأبيض والأسود، وفن الخط، والصور الواقعية، والقصص المصورة الكرتونية، وحقق نتائج مرضية.
إن إطلاق ColorFlow لا يضع معيارًا جديدًا لتقنية التلوين التلقائي لتسلسلات الصور فحسب، بل يوفر أيضًا دعمًا قويًا لمواصلة تطوير صناعة الفن. ويأمل فريق البحث أن يتم الترويج لهذه التكنولوجيا على نطاق أوسع في التطبيقات العملية وتعزيز الابتكار والتقدم في إنشاء الفن الرقمي.
مدخل المشروع: https://zhuang2002.github.io/ColorFlow/
تسليط الضوء على:
ColorFlow هو نموذج تلوين مبتكر لتسلسل الصور بالأبيض والأسود يحافظ على اتساق هوية الشخصية.
يعتمد هذا النموذج تصميمًا ثنائي الفرع، والذي يستخدم لاستخراج هوية اللون والتلوين الفعلي على التوالي، مما يحسن تأثير وكفاءة التلوين.
يتفوق ColorFlow على النماذج الحديثة الحالية في مقاييس متعددة، مما يدل على جودة جمالية أعلى وعملية.
يمثل ظهور نموذج ColorFlow تقدمًا كبيرًا في تقنية التلوين التلقائي لتسلسلات الصور. توفر قدرات التلوين الدقيقة والفعالة وقدرات التعميم القوية دعمًا فنيًا قويًا للرسوم المتحركة والقصص المصورة وغيرها من الصناعات، ومن المتوقع أن يتم تطبيقها في المزيد من المجالات في المستقبل، مما يعزز التطور النشط لإنشاء الفن الرقمي.