bens bites ai search

بن بايتس رابط البحث

ابحث عبر جميع الروابط ذات الصلة بالذكاء الاصطناعي في نشرة Ben's Bites الإخبارية - باستخدام البحث الدلالي المدعوم بالذكاء الاصطناعي.

• مقدمة
• كيف يعمل
  • البحث الدلالي
• المهام
• رخصة

مقدمة

الهدف من هذا التطبيق هو توفير بحث منظم للغاية للبقاء على اطلاع بأحدث موارد وأخبار الذكاء الاصطناعي.

يتم استخراج جميع نتائج البحث من نشرة Ben's Bites AI الإخبارية، والتي تُستخدم كمصدر بيانات منظم للغاية.

كيف يعمل

يتم تشغيل مهمة cron كل 24 ساعة لتحديث قاعدة البيانات.

تشمل الخطوات المعنية ما يلي:

1. الزحف إلى مصدر النشرة الإخبارية Beehiiv
2. تحويل كل مشاركة إلى تخفيض السعر
3. استخراج الروابط الفريدة وحلها
4. جلب البيانات الوصفية opengraph لكل رابط
5. جلب البيانات التعريفية الخاصة بالموفر لبعض الروابط (مثل نص التغريدة)
6. إنشاء تضمينات متجهة لكل رابط باستخدام OpenAI
7. تحويل جميع الروابط إلى قاعدة بيانات متجهات Pinecone

نحن نستخدم IFramely لاستخراج البيانات التعريفية المفتوحة لكل رابط، ونستخدم أيضًا روابط تغريدات خاصة بحالات خاصة لاستخراج نص التغريدة.

بمجرد حصولنا على جميع الروابط محليًا، نقوم بإدراجها في قاعدة بيانات متجهات Pinecone للبحث الدلالي.

البحث الدلالي

يتم تشغيل البحث الدلالي بواسطة نموذج التضمين text-embedding-ada-002 الخاص بـ OpenAI وقاعدة بيانات المتجهات المستضافة في Pinecone.

المهام

• بحث أفضل في UX حتى يعمل زر الرجوع
• إظهار عدد المشاركات/الروابط على الصفحة الرئيسية بحيث يكون من الواضح متى تم تحديثها آخر مرة
• قم بالفرز الدقيق حسب الحداثة بدلاً من تزييفها
• قم بإعداد cron لتحديث قاعدة البيانات يوميًا
• اختبار على سفاري/فايرفوكس
• عرض النشرة الإخبارية التي ظهر فيها المنشور لأول مرة
• استكشاف البحث الهجين
• التمرير اللانهائي حتى تتمكن من الاستمرار في تمرير النتائج

رخصة

معهد ماساتشوستس للتكنولوجيا © ترافيس فيشر

يتم استخراج كافة بيانات الارتباط من Ben's Bites AI Newsletter وهي مرخصة بموجب CC BY-NC-ND 4.0.

إذا وجدت هذا المشروع مثيرًا للاهتمام، فيرجى التفكير في رعايتي أو متابعتي على تويتر