الصفحة الرئيسية>المتعلقة بالبرمجة>كود الذكاء الاصطناعي
تنزيل

استخراج الصور من مواقع التجارة الإلكترونية

يؤكد هذا المشروع على الاستفادة من LLMs و ChatGPT من أجل المطالبة الفعالة لتعزيز دقة استخراج الصورة.

ملحوظة

هذا مشروع بحثي مستمر ، لذلك قد لا يكون الرمز نظيفًا للغاية.

موضوعي

الهدف من هذا المشروع هو استخراج صور المنتج من صفحات منتج التجارة الإلكترونية مع استبعاد الصور غير ذات الصلة مثل الشعارات أو صور المنتج المماثلة. هذا يتطلب التعامل مع مختلف اللغات والتصفية بناءً على محتوى النص.

الخطوات المخطط لها

  1. الإعداد الأولي

    • عرض HTML نظيفًا (إظهار أسماء العلامات فقط والنصوص والصور)
    • استخراج جميع الرؤوس
    • قم بإزالة العلامات غير ذات الصلة (على سبيل المثال ، نص ، رأس ، تذييل)

  2. HTML التنظيف

    • احتفظ بجميع الصور
    • احتفظ بجميع الرؤوس
    • حذف العناصر بدون صور أو رؤوس

  3. تحديد صور المنتج

    • النهج القائم على Openai
      • استخدم Openai لتحديد فئة صورة المنتج:
        • التجربة الأولى: اضغط على الشجرة لتقليل الرموز ، وتغذية واجهة برمجة التطبيقات بشكل متكرر بالنص الذي تم تنظيفه ، وإرجاع روابط الصورة كصفيف
        • رمز إعادة الهيكلة: من رابط موقع الويب إلى معالجة BeautifulSoup إلى توليد المطالبات واستخراج الارتباط
        • احتفظ فقط بالمعلومات الحاسمة (روابط الصور ، نصوص الرأس ، أسماء الفصول الدراسية)
        • قم بإزالة التكرارات (إذا كان النص/الرابط من الفئة + يشبه الإدخال السابق)
        • تجنب التثبيت ، واصل المطالبات قصيرة
        • إصلاح المشكلات (على سبيل المثال ، مصدر الصورة في سمة البيانات SRC على Jumia)
        • اختبار مع مواقع التجارة الإلكترونية الأخرى
        • رفض الصور الصغيرة (<70 بكسل)
        • استخدم العنوان والنص المحيط في المطالبة
      • النهج القائم على السيلينيوم
        • حدد أكبر صورة وفصولها وصورها المجاورة (ضع في اعتبارك CSS)
        • دمج النتائج في المطالبة
      • استخدم Crawlbase لتحميل الموقع المناسب
      • رفض الصور بدون نفس الوالد div
      • قارن خوارزميات Openai وغير Openai للدقة
        • الملاحظات:
          • قد يكون الفحص المباشر للمطالبات التي تم تنظيفها كافية بدون chatgpt
          • المطالبات المبسطة قد تسفر مباشرة عن الصور
    • خطوة إضافية : تنفيذ تصنيف الصور إلى:
      • تمييز بين الشعارات وصور المنتج
      • تحديد ما إذا كانت صور المنتج تنتمي إلى منتجات مماثلة أو تكميلية

  4. الخطوات النهائية

    • تحقق من الصور داخل العناصر المحددة
يوسع
معلومات إضافية
تطبيقات ذات صلة
نوصي لك
أخبار ذات صلة الكل