Cómo utilizar modelos de lenguaje grandes en ComfyUI

ComfyUI es una poderosa herramienta de generación de imágenes que puede mejorar enormemente la experiencia del usuario al integrar modelos de lenguaje a gran escala. Este artículo presentará en detalle cómo utilizar el servicio LLM de código abierto Ollama y el complemento ComfyUI para realizar la función de inferir palabras clave a través de imágenes, simplificando así el proceso creativo y mejorando la eficiencia. Este artículo cubrirá la descarga e instalación de Ollama, la instalación del complemento ComfyUI y los pasos completos para usar Ollama en ComfyUI, y proporcionará tutoriales con imágenes claras para ayudar a los usuarios a comenzar rápidamente.

En el diseño moderno de interfaces de usuario, la optimización de la experiencia del usuario es un objetivo que se persigue constantemente. Como interfaz de usuario avanzada, ComyUI puede ayudar a los usuarios a completar tareas de manera más eficiente mediante la integración de modelos de lenguaje a gran escala. Este artículo presentará en detalle cómo utilizar un modelo de lenguaje grande para inferir palabras rápidas en ComyUI, mejorando así la fluidez y eficiencia de la interacción del usuario.

Ollama es una herramienta de servicio de modelos de lenguajes grandes de código abierto diseñada para permitir a los usuarios ejecutar modelos de lenguajes grandes (LLM) en dispositivos locales.

Descargamos ollama desde la web oficial de ollama: https://ollama.com/

Simplemente elija su sistema correspondiente para descargarlo e instalarlo.

Para descargar el modelo Ollama, puede hacer clic en modelos en la esquina superior derecha del sitio web oficial para ver muchos modelos. Tomaré el modelo llava-phi3 como ejemplo para enseñarle cómo instalar el modelo. llama-phi3 es un modelo visual que puede reconocer nuestras imágenes y generar palabras rápidas, el cual es muy fácil de usar.

Copiamos el comando ollama run llava-phi3:latest en la página de inicio de llava-phi3

Asegúrese de que su ollama esté instalada y ejecutándose.

Luego abrimos la ventana de línea de comando CMD y pegamos el comando que acabamos de copiar. Ollama descargará automáticamente el modelo y lo llamará por nosotros.

Puede enviar mensajes para tener una conversación, lo que significa que la instalación se realizó correctamente.

Buscamos instalación de ollama en el administrador.

También puedes instalarlo usando la URL general de Git: https://github.com/stavsap/comfyui-ollama

Después de una instalación exitosa, podemos usar el nodo ollama Vision para generar palabras clave basadas en las imágenes que proporcionamos.

Ejemplo: si está utilizando modelos SD3 o Kolors con una sólida comprensión semántica, este complemento es muy fácil de usar. Si es SD1.5 o SDXL, simplemente use la etiqueta WD1 4 para invertir la palabra del mensaje.

A través de los pasos anteriores, puede utilizar eficazmente el modelo de lenguaje grande en ComyUI para revertir las palabras solicitadas y mejorar la experiencia del usuario.

-------------------------------------------------- ----------------------------------------

Webmaster Material AI Tutorial es una plataforma de tutorial de dibujo de IA en Webmaster Home

Tutoriales masivos gratuitos de IA, actualizados continuamente con contenido útil

Si desea obtener más tutoriales de dibujo de IA en profundidad, visite el sitio web del tutorial de IA de material para webmasters:

https://aisc.chinaz.com/jiaocheng/

Espero que este tutorial pueda ayudarle a utilizar mejor ComfyUI y Ollama y mejorar la eficiencia de generación de imágenes. Si tiene alguna pregunta, deje un mensaje en el área de comentarios.