MathVerse，一個用於評估多模態大型語言模型（MLLMs）在視覺數學問題解決能力的新基準，由站長之家報告。此基準測試了多個MLLMs在處理包含視覺資訊的數學題時的表現，結果顯示大多數模型對視覺輸入的依賴程度較高，而GPT-4V在文字和視覺輸入方面均表現出色。這項研究為未來MLLMs的研發提供了寶貴的參考，也促使開發者進一步關注模型對不同模態資訊的處理能力。
文章重點介紹了MathVerse基準測試的結果，凸顯了GPT-4V的優異性能以及多數模型對視覺輸入的依賴性。這項研究對於推動多模態大型語言模型的發展具有重要意義，未來將會有更多更強大的模型湧現，更好地處理包含視覺訊息的複雜任務。