What Do AIs Know About History

AI對歷史有何了解？數字歷史實驗

內容

• 項目描述
• 項目元素
• 項目目標
• 方法
• 致謝
• 執照

項目描述

這個數字歷史實驗檢查了以下問題：AIS對歷史有何了解？ AIS真的什麼都不知道。但是機器學習的最新進展導致了新的計算模型，能夠顯著模仿人類的分析能力。這些模型中研究最多的是GPT-3（生成預訓練的Transferer-3）。在這個數字歷史實驗中，用戶可以向GPT-3提出歷史問題並觀察其回答。該項目使歷史學家和公眾能夠直接探測高級AIS的歷史能力，並為自己的可能性和危險衡量。有了這些知識，我們可以更好地評估AI對過去的理解的潛在影響，並考慮該技術對未來的廣泛含義。

項目元素

1. AI對AP歷史有何“了解”？：在本節中，人類可以對AI的歷史知識來測試其歷史知識。用戶可以為我們，歐洲和世界歷史上的高級安排（AP）課程回答多項選擇問題，然後將其與GPT-3的表現進行比較。伴隨這些問題是GPT-3在這些問題上的總體表現的數據。
2. AI如何“解釋”主要來源？：在這裡，用戶可以提示GPT-3分析和解釋主要來源的選擇。 GPT-3將嘗試提供來源的上下文，目的，預期的受眾以及可能的史學解釋。
3. AI可以模擬歷史世界觀嗎？：在本節中，用戶可以向AI提出問題，以模仿歷史的人物：弗朗西斯·培根（Francis Bacon）（1561-1626），前英格蘭勳爵（Elizabeth I）和伊麗莎白女王（ Queen Elizabeth I）和國王詹姆斯一世（King James I）和國王詹姆斯一世（King James I），以及科學革命的關鍵人物。
4. 項目目標，方法和確認：探討該項目的目標，使用的一些方法，並感謝那些為該項目做出貢獻的人。

項目目標

該數字歷史實驗探討了AI應用在學術研究中的潛力和作為虛假信息的力量。該項目將OpenAI的GPT-3模型用作案例研究，因為其可訪問性和位置是強大的科學研究和辯論的主題。

2022年5月，該項目的初步發現被介紹給科學，技術和醫學史關係聯盟的數字歷史工作組。這些發現在目前正在同行評審的學術論文中擴展了。

方法

該項目採用簡化來運行Python腳本，稱為GPT-3的OpenAI API。 GPT-3的輸出是當前及時工程研究中有關的專業提示產品。具體方法包括很少的射擊提示和經過思考的推理。該項目的GITHUB存儲庫包含這些提示的全文。

致謝

非常感謝亞伯拉罕·吉布森（Abraham Gibson）向CHSTM的數字歷史工作組邀請分享這項研究的邀請，並感謝William Mattingly，Patrick Wadden和Ian Crowe的周到反饋。

該項目得到了貝爾蒙特修道院學院學術事務辦公室授予的休假學期的支持。感激不盡對教務長特拉維斯·費澤爾（Travis Feezell）和副教務長戴維·威廉姆斯（David Williams）的支持。