Pendamping AI Generatif Anda: Buka Asisten Pribadi Multi-Modal
Bebaskan Kekuatan AI Generatif di Perangkat Anda
Lupakan pin AI yang kikuk! Ponsel cerdas atau jam tangan pintar Anda sudah berpotensi menjadi pembangkit tenaga AI pribadi Anda. Proyek sumber terbuka ini memanfaatkan kekuatan penuh AI generatif, kemampuan multi-modal, dan RAG (Retrieval Augmented Generation) untuk mengubah perangkat Anda yang ada menjadi perangkat pendamping yang cerdas.
Fitur Utama:
- Multi-Platform : Rasakan bantuan AI yang lancar di iOS dan Android, berkat keserbagunaan Flutter.
- Penguasaan Suara : Berkomunikasi dengan mudah menggunakan STT/TTS Android asli atau membuka lebih banyak bahasa dengan pengenalan ucapan canggih Google Chirp.
- Dipersonalisasi untuk Anda : AI Anda mengingat preferensi Anda dan percakapan sebelumnya, memberikan rekomendasi dan bantuan yang disesuaikan melalui teknologi RAG di perangkat.
- Mode Serbaguna :
- Obrolan Suara Alami : Terlibat dalam percakapan dinamis seperti yang Anda lakukan dengan seorang teman.
- Mode Terjemahan : Hilangkan hambatan bahasa dengan terjemahan waktu nyata yang didukung oleh Chirp.
- Eksplorasi Multimodal : Ajukan pertanyaan tentang apa pun yang Anda lihat melalui kamera, sehingga membuka dimensi interaksi baru.
Kemampuan Tingkat Lanjut:
- Manfaatkan Model Flash & Pro Gemini 1.5 : Rasakan pemahaman dan pembuatan bahasa AI yang mutakhir.
- Manfaatkan Alat yang Ampuh :
- Respons yang sadar akan lokasi
- Prakiraan cuaca waktu nyata
- Informasi matahari terbit dan terbenam
- Riset web melalui Tavily (diperlukan kunci API)
- Nilai tukar mata uang fiat dan kripto terkini
Di Cakrawala:
- Pencarian web melalui DuckDuckGo Assist
- Wawasan bisnis dengan Alpha Vantage (diperlukan kunci API)
- Pencarian lirik lagu
Kemungkinan Masa Depan:
- Perluas perangkat AI Anda dengan integrasi SerpAPI
- Integrasi kalender
- Integrasi email
- Integrasi SMS / Pesan teks, panggilan, dan Kontak
Bergabunglah dengan Revolusi AI:
Ubah perangkat seluler Anda menjadi asisten AI yang dipersonalisasi. Berkontribusilah pada proyek sumber terbuka ini dan bentuk masa depan AI sesuai keinginan Anda!
Ingat : Kunci API untuk Tavily dan Alpha Vantage diperlukan untuk mengakses fitur masing-masing.
Mari kita bersama-sama membangun masa depan yang lebih cerdas dan terhubung!
Catatan:
- Video demo aplikasi: https://www.youtube.com/watch?v=kCtHH6XG5as
- Proyek ini telah diserahkan ke Kompetisi Pengembang API Gemini.
- Silakan temukan fungsi cloud terkait - yang terdiri dari backend - di organisasi Open Multi-Modal Personal Assistant. Setelah penjurian selesai, repositori ini pada akhirnya akan diganti namanya dan dipindahkan ke sana juga.
- Status repositori pada saat penyerahan adalah komit terakhir pada 12 Agustus sebelum saya merekam demo: https://github.com/CsabaConsulting/InspectorGadgetApp/tree/b7de11fa3d9122fd96b85e7c708802b371bb15c9
- Setelah Made By Google '24 seseorang mungkin membandingkan Open MMPA dengan Gemini Live, namun kita harus memperhatikan bahwa:
- Open MMPA menargetkan faktor bentuk yang tertanam
- Open MMPA juga dilengkapi Database Vektor lokal untuk sejarah dan RAG pribadi
- Open MMPA mungkin kekurangan kemampuan dan integrasi multimodal, namun semuanya terencana
- Terbuka MMPA adalah sumber terbuka
Perancah kode sumber aplikasi awal dihasilkan oleh CLI Sangat Bagus?
