IT之家11 月2 日消息,《洛杉磯時報》昨日(11 月1 日)發布博文,報道稱蘋果研究團隊測試了20 個最先進的AI 模型,發現在有乾擾項存在的情況下,它們處理簡單的算術問題時表現不佳,甚至不如小學生。
蘋果公司用以下這道簡單的算術題測試20 多個最先進的AI 模型,IT之家附上題目如下:
Oliver 在星期五採摘了44 個獼猴桃、然後他在星期六採摘了58 個獼猴桃,星期日採摘的數量是星期五的兩倍,不過其中有5 個獼猴桃的塊頭要比平均值要小,請問Oliver 這三天共摘了多少個獼猴桃?
正確答案是190個,計算公式為44(星期五)+58(星期六)+88(44*2,星期日)。
不過測試的20 多個最先進AI 模型無法排除乾擾項,通常不理解獼猴桃的大小和數量無關,大部分的結果是185 個。
蘋果團隊發現,當問題包含看似相關但實際上無關的資訊時,AI 模型的表現急劇下降。對此研究認為,AI 模型主要依賴訓練資料中的語言模式,而非真正理解數學概念。
蘋果的研究表明,目前的AI 模型「無法進行真正的邏輯推理」。這項發現提醒我們,儘管AI 在某些任務上表現出色,但其智慧並不如表面看起來那麼可靠。
蘋果團隊指出,簡單地擴展數據或運算能力並不能根本解決這個問題,蘋果的論文並非旨在削弱對AI 能力的熱情,而是提供一種理性的認知。