أجرى تقرير بحثي صدر مؤخرًا عن جامعة كارنيجي ميلون (CMU) تحليلًا مقارنًا متعمقًا لبرنامج Google Gemini Pro وOpenAI GPT-3.5. يغطي البحث مجالات متعددة مثل الإجابة على الأسئلة المعرفية والتفكير العام، ويقيم فرق الأداء بين النموذجين من خلال اختبار المهام المتعددة. تظهر نتائج التقرير أنه على الرغم من أن Gemini Pro يتمتع بمزايا في بعض الجوانب كنموذج متعدد الوسائط، إلا أن GPT-3.5 لا يزال يُظهر أداءً أقوى في معظم الاختبارات، خاصة في الأسئلة والإجابة المعرفية والتفكير العام.
أفاد موقع Webmaster Home أن أبحاث CMU تظهر أنه لا يوجد فرق كبير بين Gemini Pro وGPT-3.5، لكنه غير كافٍ قليلاً في اختبارات المهام المتعددة. يغطي البحث العديد من المجالات، ويقود GPT-3.5 الطريق في الإجابة على الأسئلة المعرفية والتفكير العام. على الرغم من أن Gemini Pro هو نموذج متعدد الوسائط، إلا أن GPT-3.5 يحافظ على أداء ممتاز في معظم الاختبارات.
بشكل عام، يوفر هذا البحث الذي أجرته CMU مرجعًا قيمًا لنا لفهم اختلافات الأداء بعمق بين Gemini Pro وGPT-3.5، كما يوفر إلهامًا جديدًا لاتجاه التطوير المستقبلي لنماذج اللغات الكبيرة. على الرغم من قيام Gemini Pro ببعض المحاولات للوسائط المتعددة، إلا أن GPT-3.5 لا يزال يتمتع بمزايا واضحة في القدرات الأساسية. قد تركز أبحاث المتابعة على كيفية الجمع بشكل أفضل بين القدرات متعددة الوسائط وقدرات التفكير القوية.