Prompt Engineering for Vision Models

Ingeniería rápida para modelos de visión

Explore el curso de "Ingeniería rápida para modelos de visión", diseñado para mejorar su comprensión de las técnicas de ingeniería rápida en los modelos de texto y visión. Este curso lo capacitará para indicar y ajustar a varios modelos de visión de manera efectiva.

Resumen del curso

En este curso, profundizará en el ámbito de la ingeniería rápida para los modelos de visión, explorando técnicas para impulsar modelos como Meta Segment Model (SAM), OWL-VIT y Difusión Estable 2.0. Esto es lo que aprenderá:

1. Generación de imágenes : modelos de visión de inmediato con texto y ajuste los hiperparámetros para generar imágenes con las características deseadas.

2. Segmentación de imágenes : use coordenadas positivas o negativas, junto con coordenadas de cuadro delimitadoras, para solicitar modelos para la segmentación de imagen precisa.

3. Detección de objetos : emplee las indicaciones de lenguaje natural para producir cuadros delimitadores, aislando objetos específicos dentro de las imágenes.

4. En la pintura : combine la detección de objetos, la segmentación de imágenes y las técnicas de generación de imágenes para reemplazar objetos dentro de las imágenes con contenido generado.

5. Personalización con ajuste : modelos de difusión de ajuste fino para generar imágenes personalizadas basadas en imágenes proporcionadas de personas o lugares, utilizando una técnica llamada Dreambooth.

6. Iteración y seguimiento de experimentos : aprenda cómo rastrear los experimentos de manera efectiva utilizando Comet, una biblioteca que ayuda a optimizar los flujos de trabajo de ingeniería de inmediato.

Puntos clave

• Modelos de visión de indicación con texto, coordenadas y cuadros delimitadores, sintonizar hiperparámetros para las características de salida deseadas.

• ? Use en pintura para reemplazar partes de las imágenes con contenido generado, combinando varias técnicas de modelo de visión.

• Modelos de difusión de ajuste fino para la generación de imágenes precisas, incluida la personalización con imágenes personalizadas.

• Rastree los experimentos de manera eficiente utilizando Comet, optimizando sus flujos de trabajo de ingeniería de inmediato visual.

Sobre los instructores

Abby Morgan , Jacques Verré y Caleb Kaiser son ingenieros experimentados de aprendizaje automático en Comet, lo que brinda su experiencia para guiarlo a través de las complejidades de la ingeniería rápida del modelo de visión.

Para la inscripción y detalles adicionales, visite Deeplearning.ai.