asktube

AskTube - ملخص فيديو على YouTube مدعوم بالذكاء الاصطناعي ومساعد ضمان الجودة مدعوم من الجيل المعزز للاسترجاع (RAG)؟

قم بتشغيله بالكامل على جهازك المحلي باستخدام Ollama، أو النماذج المستندة إلى السحابة مثل Claude وOpenAI وGemini وMistral والمزيد

---

??‍➡️ العرض التوضيحي ولقطات الشاشة

شاهد "AskTube First Demo" على YouTube

التجريبي.mp4

---

؟ سمات

• العمل حتى مع الفيديو بدون ترجمة
• لا يوجد حد لوقت الفيديو
• دعم العديد من بائعي الذكاء الاصطناعي
• التركيز على تنفيذ RAG
• تشغيل كامل على جهازك المحلي

؟؟ لماذا يوجد هذا المشروع؟

• لقد رأيت العديد من مستودعات GitHub التي تقدم ملخصات مدعومة بالذكاء الاصطناعي لمقاطع فيديو YouTube، ولكن لا يتضمن أي منها وظيفة الأسئلة والأجوبة .
• أرغب في تنفيذ حل أكثر شمولاً مع اكتساب الخبرة في مجال الذكاء الاصطناعي لإنشاء تطبيق RAG الخاص بي.

---

؟ تكنولوجيا

• اللغة : بايثون، JS
• الخادم : [email protected]، Bun@v1
• الإطار/المكتبة : Sanic، Peewee، Pytubefix، Sentence Transformers، Sqlite، Chroma، NuxtJs/DaisyUI، إلخ.
• موفر التضمين (موفر التحليل) :
  • OpenAI
  • تَوأَم
  • VoyageAI
  • ميسترال
  • محولات الجملة (محلي)
• مزود الذكاء الاصطناعي :
  • OpenAI
  • كلود
  • تَوأَم
  • ميسترال
  • أولاما (محلي)
• الكلام إلى النص :
  • الهمس الأسرع (محلي)
  • AssemblyAI
  • OpenAI
  • تَوأَم

---

️ مهام تودو التالية

• تنفيذ تحويل الكلام إلى نص للنماذج السحابية
  • AssemblyAI
  • OpenAI
  • تَوأَم
• يحسن
  • تخطي استخدام RAG لمقاطع الفيديو القصيرة
  • مطالبات الدردشة ورسائل الدردشة حسب حد السياق
  • RAG: تنفيذ ترجمة الاستعلام
    • الاستعلام المتعدد
    • الانصهار
    • التحلل
    • تراجع
    • هايد

---

كيفية تشغيل ؟

عند التشغيل لأول مرة، قد يكون البرنامج بطيئًا بعض الشيء نظرًا لأنه يحتاج إلى تثبيت نماذج محلية.

تشغيل على جهازك

• تأكد من تثبيت:

  • بايثون 3.10

    • مستخدم ويندوز ، يرجى تحميل هنا
    • مستخدم Linux أو MacOS ، يرجى استخدام homebrew أو أمر حزمة التثبيت (apt, dnf, etc)
    • أو استخدم conda

  • شِعر

    • يقوم مستخدم Windows بفتح Powershell وتشغيله:

    (Invoke-WebRequest -Uri https://install.python-poetry.org -UseBasicParsing).Content | py -

    • يقوم مستخدم Linux وMacOS بفتح Terminal وتشغيل:

    curl -sSL https://install.python-poetry.org | python3 -

  • كعكة

  • ffmpeg

    • مستخدم ماك

    brew install ffmpeg

    • مستخدم لينكس

     # Ubuntu
    sudo apt install ffmpeg
    # Fedora
    sudo dnf install -y ffmpeg

    • لنظام التشغيل Windows ، يرجى اتباع هذا البرنامج التعليمي لتثبيت ffmpeg لنظام التشغيل Windows

• استنساخ المستودع

  git clone https://github.com/jonaskahn/asktube.git

• قم بإنشاء ملف .env في دليل asktube/engine :

  • محليا
  • مجاني مع بعض القيود

• تشغيل البرنامج

  • قد تحتاج إلى التشغيل أولاً:

  poetry env use python

  • افتح terminal/cmd/powershell في دليل asktube/engine ، ثم قم بتشغيل:

  poetry install && poetry run python engine/server.py

  • افتح terminal/cmd/powershell في دليل asktube/web ، ثم قم بتشغيل:

  bun install && bun run dev

• افتح الويب: http://localhost:3000

مع عامل ميناء (قيد المعالجة)

قبل أن تبدأ

1. لقد قمت بإنشاء هذه الخدمات لصور عامل الإرساء، ولكن إذا كنت ترغب في إنشاء صور محلية، فيرجى تشغيل build.local.bat لنظام Windows أو build.local.amd64.sh أو build.local.aarch64.sh لنظام التشغيل MacOS و Linux
2. إذا كان لديك وحدة معالجة رسومات (cuda أو rocm)، فيرجى الرجوع إلى إعدادات ENV أعلاه، وتغيير المعلمات كما هو مذكور أعلاه

محليا

• استخدم ملف الإنشاء local.yaml للبدء
• افتح terminal/cmd/powershell في دليل asktube

docker compose -f compose/local.yaml pull && docker compose -f compose/local.yaml up -d

• بعد التشغيل، تحتاج إلى تثبيت نموذج Ollama qwen2 و llama3.1 لضمان الجودة

docker run ollama ollama run qwen2
docker run ollama ollama run llama3.1

مجاني (مع حد للسعر)

• يتعين عليك الانتقال إلى Google Gemini وVoyageAI لتسجيل الحساب وإنشاء مفاتيح API الخاصة بك:
  • Gemini مجاني مع حسابك في Google
  • يمنحك VoyageAI (الذي أوصى به كلود) 50 مليون رمز مجاني (كمية ضخمة) ولكن عليك إضافة بطاقتك الائتمانية أولاً.
• استبدل إعداد ENV الخاص بك في ملف عامل الإرساء مجانًا وابدأ تشغيل عامل الإرساء
• افتح terminal/cmd/powershell في دليل asktube

docker compose -f compose/free.yaml pull && docker compose -f compose/free.yaml up -d

مثالي

• استخدام VoyageAI لتضمين النصوص
• باستخدام OpenAI و Claude for QA، قم بتسجيل الحساب وإنشاء مفاتيح API الخاصة بك
• استبدل إعداد ENV الخاص بك في ملف عامل الإرساء المثالي وابدأ تشغيل عامل الإرساء
• افتح terminal/cmd/powershell في دليل asktube

docker compose -f compose/ideal.yaml pull && docker compose -f compose/ideal.yaml up -d

نتيجة

• افتح الويب: http://localhost:8080

---

بنيان

قد يختلف التنفيذ الحقيقي عن هذا الفن بسبب تعقيده.

1️⃣ استخراج البيانات من عنوان URL المحدد

2️⃣ تخزين تضمين ترجمات الفصل

3️⃣الطرح (سؤال إثراء متضمن)

---

؟ يلاحظ

1. لا تستخدم هذا للإنتاج. كان هذا موجهًا للمستخدمين النهائيين على أجهزتهم المحلية.
2. لا تطلب أي ميزات متقدمة للإدارة.

✍؟ من أجل التنمية

• الخلفية
• الواجهة الأمامية

---

⁉️ الأسئلة الشائعة واستكشاف الأخطاء وإصلاحها

• FQA

---