awesome openai vision api experiments

expériences api openai vision ?

Bonjour

La ressource incontournable pour tous ceux qui souhaitent expérimenter et développer l'API OpenAI Vision. Ce référentiel sert de plateforme pour des expériences innovantes, présentant une variété d'applications allant de la simple classification d'images aux modèles avancés d'apprentissage zéro-shot. Il s'agit d'un espace permettant aux débutants et aux experts d'explorer les capacités de l'API Vision, de partager leurs découvertes et de collaborer pour repousser les limites de l'IA visuelle.

Expérimenter avec l'API OpenAI nécessite une API ?. Vous pouvez en obtenir un ici.

️ Limites

• 100 requêtes API par clé API unique et par jour.
• Ne peut pas être utilisé pour la détection d'objets ou la segmentation d'images. Nous pouvons résoudre ce problème en combinant GPT-4V avec des modèles fondamentaux comme GroundingDINO ou Segment Anything (SAM). Veuillez jeter un œil à l’exemple et lire notre article de blog.

? Expériences

expérience	matériaux complémentaires	auteurs
WebcamGPT - discuter avec flux vidéo		@SkalskiP
HotDogGPT - application simple de classification d'images		@SkalskiP
classificateur d'images zéro tir avec GPT-4V		@capjamesg
détection d'objet zéro tir avec GroundingDINO + GPT-4V		@capjamesg
GPT-4V contre CLIP		@capjamesg
GPT-4V avec jeu de marques (SoM)		Jianwei Yang, Hao Zhang, Feng Li, Xueyan Zou, Chunyuan Li, Jianfeng Gao
GPT-4V sur le Web		@Jiayi-Pan
voix off automatisée du jeu NBA		@SkalskiP
capture d'écran en code		@abi
GPT avec examen de la vue		L'équipe Roboflow

webcamgpt.mov

?️ Doit lire des articles

• L'invite d'ensemble de marques libère une base visuelle extraordinaire dans GPT-4V par Jianwei Yang, Hao Zhang, Feng Li, Xueyan Zou, Chunyuan Li, Jianfeng Gao
• L'aube des LMM : explorations préliminaires avec GPT-4V (ision) par Zhengyuan Yang, Linjie Li, Kevin Lin, Jianfeng Wang, Chung-Ching Lin, Zicheng Liu, Lijuan Wang
• Carte système GPT-4 par OpenAI

Blogues

• Comment CLIP et GPT-4V se comparent pour la classification
• Expériences avec GPT-4V pour la détection d'objets
• Distiller GPT-4 pour la classification avec une API
• DINO-GPT4-V : utilisez GPT-4V dans un modèle de détection en deux étapes
• Premières impressions avec GPT-4V(ison)

? Contribution

Nous serions ravis de votre aide pour rendre ce référentiel encore meilleur ! Que vous souhaitiez ajouter une nouvelle expérience ou avoir des suggestions d'amélioration, n'hésitez pas à ouvrir un problème ou une pull request.

Si vous êtes à la hauteur et souhaitez ajouter une nouvelle expérience, veuillez consulter notre guide de contribution. Vous y trouverez toutes les informations dont vous avez besoin.