คู่หู AI เจนเนอเรชั่นของคุณ: เปิดผู้ช่วยส่วนตัวแบบ Multi-Modal
ปลดปล่อยพลังของ Generative AI บนอุปกรณ์ของคุณ
ลืมพิน AI ที่เทอะทะไปได้เลย! สมาร์ทโฟนหรือสมาร์ทวอทช์ของคุณมีศักยภาพที่จะเป็นขุมพลัง AI ส่วนตัวของคุณอยู่แล้ว โปรเจ็กต์โอเพ่นซอร์สนี้ควบคุมศักยภาพเต็มรูปแบบของ AI เชิงสร้างสรรค์ ความสามารถหลายรูปแบบ และ RAG (Retrieval Augmented Generation) เพื่อเปลี่ยนอุปกรณ์ที่มีอยู่ของคุณให้กลายเป็นสหายอัจฉริยะ
คุณสมบัติที่สำคัญ:
- หลายแพลตฟอร์ม : สัมผัสประสบการณ์ความช่วยเหลือ AI ที่ราบรื่นบน iOS และ Android ด้วยความเก่งกาจของ Flutter
- ความเชี่ยวชาญด้านเสียง : สื่อสารอย่างง่ายดายด้วย Android STT/TTS หรือปลดล็อกภาษาเพิ่มเติมด้วยการรู้จำเสียงพูดขั้นสูงของ Google Chirp
- ปรับแต่งให้เหมาะกับคุณ : AI ของคุณจะจดจำการตั้งค่าและการสนทนาที่ผ่านมาของคุณ ให้คำแนะนำและความช่วยเหลือที่ปรับให้เหมาะสมผ่านเทคโนโลยี RAG บนอุปกรณ์
- โหมดอเนกประสงค์ :
- แชทด้วยเสียงที่เป็นธรรมชาติ : มีส่วนร่วมในการสนทนาแบบไดนามิกเหมือนกับที่คุณทำกับเพื่อน
- โหมดการแปล : ทลายกำแพงด้านภาษาด้วยการแปลแบบเรียลไทม์ที่ขับเคลื่อนโดย Chirp
- การสำรวจหลายรูปแบบ : ถามคำถามเกี่ยวกับสิ่งที่คุณเห็นผ่านกล้องของคุณ เพื่อปลดล็อกมิติใหม่ของการโต้ตอบ
ความสามารถขั้นสูง:
- ใช้ประโยชน์จากโมเดล Gemini 1.5 Flash & Pro : สัมผัสประสบการณ์ความเข้าใจและการสร้างภาษา AI ที่ล้ำสมัย
- ใช้ประโยชน์จากเครื่องมืออันทรงพลัง :
- การตอบสนองที่ทราบตำแหน่ง
- พยากรณ์อากาศแบบเรียลไทม์
- ข้อมูลพระอาทิตย์ขึ้นและตก
- การวิจัยเว็บผ่าน Tavily (ต้องใช้คีย์ API)
- อัตราแลกเปลี่ยนสกุลเงิน fiat และ crypto ที่ทันสมัย
บนขอบฟ้า:
- ค้นหาเว็บผ่าน DuckDuckGo Assist
- ข้อมูลเชิงลึกทางธุรกิจด้วย Alpha Vantage (ต้องใช้คีย์ API)
- ค้นหาเนื้อเพลง
ความเป็นไปได้ในอนาคต:
- ขยายชุดเครื่องมือ AI ของคุณด้วยการผสานรวม SerpAPI
- การรวมปฏิทิน
- บูรณาการอีเมล์
- บูรณาการ SMS / ข้อความ การโทร และผู้ติดต่อ
เข้าร่วมการปฏิวัติ AI:
เปลี่ยนอุปกรณ์มือถือของคุณให้เป็นผู้ช่วย AI ส่วนตัว มีส่วนร่วมในโครงการโอเพ่นซอร์สนี้และกำหนดอนาคตของ AI ตามเงื่อนไขของคุณ!
ข้อควรจำ : ต้องใช้คีย์ API สำหรับ Tavily และ Alpha Vantage เพื่อเข้าถึงฟีเจอร์ที่เกี่ยวข้อง
มาสร้างอนาคตที่ชาญฉลาดและเชื่อมโยงกันมากขึ้นด้วยกัน!
หมายเหตุ:
- วิดีโอสาธิตของแอป: https://www.youtube.com/watch?v=kCtHH6XG5as
- โครงการนี้ถูกส่งไปยังการแข่งขันนักพัฒนา Gemini API
- โปรดค้นหาฟังก์ชันคลาวด์ที่เกี่ยวข้อง ซึ่งประกอบด้วยแบ็กเอนด์ ในองค์กร Open Multi-Modal Personal Assistant เมื่อการตัดสินสิ้นสุดลง พื้นที่เก็บข้อมูลนี้จะถูกเปลี่ยนชื่อและถ่ายโอนไปที่นั่นในที่สุดเช่นกัน
- สถานะพื้นที่เก็บข้อมูล ณ เวลาที่ยื่นเป็นการกระทำครั้งสุดท้ายในวันที่ 12 สิงหาคมก่อนที่ฉันจะบันทึกการสาธิต: https://github.com/CsabaConsulting/InspectorGadgetApp/tree/b7de11fa3d9122fd96b85e7c708802b371bb15c9
- หลังจาก Made By Google ปี 2024 อาจมีคนเปรียบเทียบ Open MMPA กับ Gemini Live แต่เราต้องสังเกตว่า:
- MMPA แบบเปิดกำหนดเป้าหมายไปที่ฟอร์มแฟคเตอร์แบบฝัง
- Open MMPA ยังมีฐานข้อมูลเวกเตอร์ในพื้นที่สำหรับประวัติและ RAG ส่วนบุคคล
- MMPA แบบเปิดอาจขาดความสามารถและการบูรณาการหลายรูปแบบ แต่ทั้งหมดนี้เป็นไปตามการวางแผน
- Open MMPA เป็นโอเพ่นซอร์ส
โครงการประยุกต์ใช้ซอร์สโค้ดเริ่มต้นถูกสร้างขึ้นโดย Very Good CLI ?
