What Do AIs Know About History

AIは歴史について何を知っていますか？デジタル履歴実験

コンテンツ

• プロジェクトの説明
• プロジェクト要素
• プロジェクトの目標
• 方法
• 謝辞
• ライセンス

プロジェクトの説明

このデジタル歴史実験では、次の質問を検証します。AISは歴史について何を知っていますか？ AISは本当に何も「知らない」ことはありません。しかし、機械学習の最近の進歩により、人間の分析能力を顕著に模倣できる新しい計算モデルが生まれました。これらのモデルの中で最も研究されているのは、GPT-3（生成事前トレーニングトランス-3）です。このデジタル履歴実験では、ユーザーはGPT-3に歴史的な質問を投げかけ、その応答を観察できます。このプロジェクトにより、歴史家と一般の人々は、高度なAIの歴史的能力を直接調査し、この技術の可能性と危険を測定することができます。このような知識により、AIの過去の理解に対する潜在的な影響をよりよく評価し、この技術の将来のより広い意味を考慮することができます。

プロジェクト要素

1. AIはAPの歴史について何を「知っていますか？：このセクションでは、人間はAIの歴史的知識に対して歴史的知識をテストできます。ユーザーは、当社、ヨーロッパ、世界の歴史のための高度な配置（AP）カリキュラムからの複数選択の質問に答えることができ、そのパフォーマンスをGPT-3と比較できます。これらの質問に伴うのは、これらの質問に関するGPT-3の全体的なパフォーマンスに関するデータです。
2. AIはどのように主要なソースを「解釈」しますか？：ここでユーザーは、GPT-3にプライマリソースの選択を分析および解釈するように促すことができます。 GPT-3は、ソースのコンテキスト、目的、対象者、およびソースの歴史的解釈の可能性を提供しようとします。
3. AIは歴史の世界観をシミュレートできますか？：このセクションでは、ユーザーは歴史からの人物を模倣するように指示されたAIに質問を投げかけることができます：フランシス・ベーコン（1561-1626）、元イギリスの元首相、エリザベス1世、ジェームズ1世王、および科学革命の重要な人物。
4. プロジェクトの目標、方法、および謝辞：このプロジェクトの目的、使用された方法のいくつかを調査し、このプロジェクトに貢献した人に感謝します。

プロジェクトの目標

このデジタル履歴実験では、学術研究のためのAIアプリケーションの可能性と偽情報の力としての可能性を探ります。このプロジェクトは、堅牢な科学的研究と議論の対象としてのアクセシビリティと位置のため、ケーススタディとしてOpenaiのGPT-3モデルをケーススタディとして使用しています。

2022年5月、このプロジェクトの最初の調査結果は、科学、技術、医学の歴史のためのコンソーシアムのためにデジタル歴史ワーキンググループに提示されました。調査結果は、現在ピアレビュー中の学術論文で拡大されています。

方法

このプロジェクトでは、GPT-3のOpenaiのAPIを呼び出すPythonスクリプトを実行するためにRiremlitを使用しています。 GPT-3の出力は、プロンプトエンジニアリングの現在の研究から通知された専門のプロンプトの製品です。具体的な方法には、ショットプロンプトと思考のチェーン推論がほとんど含まれていません。プロジェクトのGitHubリポジトリには、これらのプロンプトの全文が含まれています。

謝辞

CHSTMのデジタルヒストリーワーキンググループにこの研究を共有するよう招待してくれたAbraham Gibsonに感謝します。

このプロジェクトは、ベルモント修道院大学のアカデミックアフェアーズオフィスが授与されたサバティカル学期によってサポートされていました。この努力の支持について、プロボストのトラビス・フェゼルと副プロボスト・デイビッド・ウィリアムズに感謝されています。