رفيقك في مجال الذكاء الاصطناعي: افتح المساعد الشخصي متعدد الوسائط
أطلق العنان لقوة الذكاء الاصطناعي التوليدي على أجهزتك
ننسى دبابيس منظمة العفو الدولية عالي الكعب! يتمتع هاتفك الذكي أو ساعتك الذكية بالفعل بالقدرة على أن يصبح مصدر قوة الذكاء الاصطناعي الشخصي الخاص بك. يسخر هذا المشروع مفتوح المصدر القوة الكاملة للذكاء الاصطناعي التوليدي، والإمكانات متعددة الوسائط، وRAG (الجيل المعزز للاسترجاع) لتحويل أجهزتك الحالية إلى مرافقين أذكياء.
الميزات الرئيسية:
- منصة متعددة : استمتع بمساعدة الذكاء الاصطناعي السلسة على نظامي التشغيل iOS وAndroid، وذلك بفضل تعدد استخدامات Flutter.
- إتقان الصوت : تواصل بسهولة مع نظام Android STT/TTS الأصلي أو افتح المزيد من اللغات باستخدام ميزة التعرف على الكلام المتقدمة من Google Chirp.
- مخصص لك : يتذكر الذكاء الاصطناعي الخاص بك تفضيلاتك ومحادثاتك السابقة، ويقدم توصيات ومساعدة مخصصة من خلال تقنية RAG الموجودة على الجهاز.
- وسائط متعددة الاستخدامات :
- الدردشة الصوتية الطبيعية : انخرط في محادثات ديناميكية كما تفعل مع صديق.
- وضع الترجمة : تغلب على حواجز اللغة من خلال الترجمة الفورية المدعومة من Chirp.
- استكشاف متعدد الوسائط : اطرح أسئلة حول أي شيء تراه من خلال الكاميرا، مما يفتح بُعدًا جديدًا للتفاعل.
القدرات المتقدمة:
- استفد من نماذج Gemini 1.5 Flash & Pro : استمتع بتجربة فهم وتوليد لغة الذكاء الاصطناعي المتطورة.
- اضغط على أدوات قوية :
- استجابات مدركة للموقع
- توقعات الطقس في الوقت الحقيقي
- معلومات شروق الشمس وغروبها
- البحث على الويب من خلال Tavily (يتطلب مفتاح API)
- أحدث أسعار صرف العملات الورقية والتشفير
في الأفق:
- البحث في الويب عبر مساعدة DuckDuckGo
- رؤى الأعمال باستخدام Alpha Vantage (مفتاح واجهة برمجة التطبيقات مطلوب)
- بحث غنائي الأغنية
الاحتمالات المستقبلية:
- قم بتوسيع مجموعة أدوات الذكاء الاصطناعي لديك من خلال تكامل SerpAPI
- تكامل التقويم
- تكامل البريد الإلكتروني
- تكامل الرسائل القصيرة / الرسائل النصية والمكالمات وجهات الاتصال
انضم إلى ثورة الذكاء الاصطناعي:
قم بتحويل جهازك المحمول إلى مساعد AI مخصص. ساهم في هذا المشروع مفتوح المصدر وشكل مستقبل الذكاء الاصطناعي وفقًا لشروطك!
تذكر : مفاتيح API الخاصة بـ Tavily وAlpha Vantage مطلوبة للوصول إلى الميزات الخاصة بكل منهما.
دعونا نبني مستقبلًا أكثر ذكاءً وأكثر تواصلًا معًا!
ملحوظات:
- فيديو تجريبي للتطبيق: https://www.youtube.com/watch?v=kCtHH6XG5as
- تم تقديم هذا المشروع إلى مسابقة مطوري Gemini API.
- يرجى العثور على الوظائف السحابية ذات الصلة - والتي تشكل الواجهة الخلفية - في مؤسسة Open Multi-Modal Personal Assistant. بمجرد انتهاء التحكيم، ستتم إعادة تسمية هذا المستودع ونقله هناك أيضًا.
- كانت حالة المستودع في وقت التقديم هي آخر التزام في 12 أغسطس قبل أن أسجل العرض التوضيحي: https://github.com/CsabaConsulting/InspectorGadgetApp/tree/b7de11fa3d9122fd96b85e7c708802b371bb15c9
- بعد Made By Google '24، قد يقارن شخص ما بين Open MMPA وGemini Live، ولكن يجب أن نلاحظ ما يلي:
- يستهدف MMPA المفتوح عوامل الشكل المضمنة
- يتميز Open MMPA أيضًا بقاعدة بيانات متجهة محلية للتاريخ وRAG الشخصي
- قد يفتقر MMPA المفتوح إلى بعض القدرات والتكاملات متعددة الوسائط، ولكن كل ذلك مخطط له
- Open MMPA مفتوح المصدر
تم إنشاء سقالة التعليمات البرمجية المصدرية للتطبيق الأولي بواسطة واجهة سطر الأوامر (CLI) الجيدة جدًا؟
