awesome openai vision api experiments

eksperimen openai vision api?

Halo

Sumber daya yang harus dimiliki oleh siapa pun yang ingin bereksperimen dan membangun OpenAI Vision API. Repositori ini berfungsi sebagai pusat eksperimen inovatif, menampilkan beragam aplikasi mulai dari klasifikasi gambar sederhana hingga model pembelajaran zero-shot tingkat lanjut. Ini adalah ruang bagi pemula dan ahli untuk mengeksplorasi kemampuan Vision API, berbagi temuan mereka, dan berkolaborasi dalam mendorong batas-batas AI visual.

Bereksperimen dengan OpenAI API memerlukan API?. Anda bisa mendapatkannya di sini.

️ Keterbatasan

• 100 permintaan API per satu kunci API per hari.
• Tidak dapat digunakan untuk deteksi objek atau segmentasi gambar. Kami dapat mengatasi masalah ini dengan menggabungkan GPT-4V dengan model dasar seperti GroundingDINO atau Segment Anything (SAM). Silakan lihat contohnya dan baca postingan blog kami.

? Eksperimen

percobaan	bahan pelengkap	penulis
WebcamGPT - mengobrol dengan aliran video		@SkalskiP
HotDogGPT - aplikasi klasifikasi gambar sederhana		@SkalskiP
pengklasifikasi gambar zero-shot dengan GPT-4V		@capjamesg
deteksi objek zero-shot dengan GroundingDINO + GPT-4V		@capjamesg
GPT-4V vs.KLIP		@capjamesg
GPT-4V dengan Set-of-Mark (SoM)		Jianwei Yang, Hao Zhang, Feng Li, Xueyan Zou, Chunyuan Li, Jianfeng Gao
GPT-4V di Web		@Jiayi-Pan
sulih suara otomatis game NBA		@SkalskiP
tangkapan layar-ke-kode		@abi
GPT dengan Pemeriksaan Penglihatan		tim Roboflow

webcamgpt.mov

?️ Harus Membaca Makalah

• Dorongan Set-of-Mark Melepaskan Landasan Visual yang Luar Biasa dalam GPT-4V oleh Jianwei Yang, Hao Zhang, Feng Li, Xueyan Zou, Chunyuan Li, Jianfeng Gao
• Fajar LMM: Eksplorasi Awal dengan GPT-4V(ision) oleh Zhengyuan Yang, Linjie Li, Kevin Lin, Jianfeng Wang, Chung-Ching Lin, Zicheng Liu, Lijuan Wang
• Kartu Sistem GPT-4 oleh OpenAI

Blog

• Bagaimana CLIP dan GPT-4V Dibandingkan untuk Klasifikasi
• Eksperimen dengan GPT-4V untuk Deteksi Objek
• Penyulingan GPT-4 untuk Klasifikasi dengan API
• DINO-GPT4-V: Gunakan GPT-4V dalam Model Deteksi Dua Tahap
• Kesan Pertama dengan GPT-4V(ision)

? Kontribusi

Kami akan sangat senang jika Anda membantu membuat repositori ini menjadi lebih baik! Baik Anda ingin menambahkan eksperimen baru atau memiliki saran untuk perbaikan, silakan buka masalah atau tarik permintaan.

Jika Anda siap melakukan tugas tersebut dan ingin menambahkan eksperimen baru, silakan lihat panduan kontribusi kami. Di sana Anda dapat menemukan semua informasi yang Anda butuhkan.