Recientemente, una herramienta de IA para colorear y dibujar líneas llamada MangaNinja ha provocado acaloradas discusiones. Puede colorear automáticamente dibujos lineales basados en imágenes de referencia y proporcionar un control preciso sobre los detalles. Esta innovadora tecnología se basa en el modelo de difusión y mejora significativamente la precisión de la coloración y la experiencia interactiva a través de innovadores módulos de reorganización de parches y esquemas de control basados en puntos. Los usuarios pueden realizar fácilmente una combinación de colores detallada y lograr efectos de coloración de alta calidad incluso en escenas complejas, como situaciones en las que las poses de los personajes varían mucho o faltan detalles.
Recientemente, un método de coloración de dibujos lineales llamado MangaNinja ha atraído una gran atención. Simplemente ingrese el dibujo lineal y la imagen de referencia, y podrá colorear el dibujo lineal de destino según la imagen de referencia. Esta tecnología se basa en el modelo de difusión y se centra en la coloración de dibujos lineales guiados por imágenes de referencia, lo que mejora en gran medida la precisión y el control interactivo de la coloración.
El equipo de investigación aseguró la transmisión precisa de los detalles de los personajes a través de dos diseños innovadores. En primer lugar, introdujeron un módulo de reordenamiento de parches para facilitar el aprendizaje de la correspondencia entre imágenes en color de referencia y dibujos lineales de destino. En segundo lugar, se adopta un esquema de control basado en puntos, que permite a los usuarios combinar colores con precisión.
En sus experimentos, los investigadores construyeron un conjunto de datos de referencia recopilados por ellos mismos y lo compararon con métodos de coloración existentes. Los resultados mostraron que MangaNinja superó significativamente a otros métodos en precisión de coloración y calidad de imagen generada. Una característica importante de este método es que no depende de una guía puntual para generar resultados y aun así logra efectos de coloración de alta calidad.
MangaNinja muestra sus fortalezas únicas al manejar algunos escenarios desafiantes. Por ejemplo, cuando se enfrentan grandes cambios en la postura del personaje o falta de detalles, la guía puntual puede ayudar a resolver estos problemas. La guía puntual también es eficaz para evitar la confusión de colores cuando hay varios objetos involucrados. Además, los usuarios pueden colorear múltiples imágenes de referencia seleccionando áreas específicas de múltiples imágenes de referencia, proporcionando así guía para elementos individuales del dibujo lineal y resolviendo efectivamente conflictos entre elementos visuales similares.
La tecnología también permite la coincidencia de colores semántica y un control preciso cuando se utilizan diferentes imágenes de referencia. Los investigadores creen que este método de coloración interactivo puede ayudar a los usuarios a encontrar inspiración durante el proceso de coloración y brindar más posibilidades creativas.
Proyecto: https://johanan528.github.io/MangaNinjia/
github: https://github.com/ali-vilab/MangaNinjia
Destacar:
MangaNinja es un método de coloración mediante dibujo lineal basado en imágenes de referencia, con la capacidad de unir con precisión y controlar meticulosamente.
A través de su innovador módulo de reorganización de parches y su esquema de control basado en puntos, MangaNinja mejora significativamente la precisión del color y la calidad de la imagen.
Esta tecnología puede manejar diversos desafíos de coloración, incluidas poses extremas y coordinación de múltiples imágenes de referencia, lo que permite una experiencia de coloración interactiva de alta calidad.
La aparición de MangaNinja proporciona una comodidad y precisión sin precedentes para colorear dibujos lineales, proporcionando a los artistas y diseñadores poderosas herramientas creativas. Su naturaleza de código abierto también proporciona una buena base para un mayor desarrollo de tecnologías futuras. ¡Esperamos que MangaNinja traiga más sorpresas en el futuro!