What Do AIs Know About History

O que a IA sabe sobre a história? Um experimento de história digital

Conteúdo

• Descrição do projeto
• Elementos do projeto
• Objetivos do projeto
• Métodos
• Agradecimentos
• Licença

Descrição do projeto

Este experimento de história digital examina a seguinte pergunta: O que o AIS sabe sobre a história? Ais não 'sabe' nada. Mas os recentes avanços no aprendizado de máquina resultaram em novos modelos computacionais capazes de notável imitação de capacidades analíticas humanas. Entre os mais estudados desses modelos está o GPT-3 (transformador generativo pré-treinado-3). Neste experimento de história digital, os usuários podem fazer perguntas históricas no GPT-3 e observar suas respostas. Este projeto permite que os historiadores e o público investigam diretamente as capacidades históricas do AIS avançado e avaliem para si as possibilidades e os perigos dessa tecnologia. Com esse conhecimento, podemos avaliar melhor o impacto potencial da IA ​​na compreensão do passado e considerar as implicações mais amplas dessa tecnologia para o futuro.

Elementos do projeto

1. O que uma IA "sabe" sobre a história da AP?: Nesta seção, os humanos podem testar seu conhecimento histórico contra o de uma IA. Os usuários podem responder a perguntas de múltipla escolha dos currículos avançados de colocação (AP) para nós, europeu e história mundial e, em seguida, comparar seu desempenho com o GPT-3. Acompanhando essas perguntas, há dados sobre o desempenho geral do GPT-3 nessas questões.
2. Como uma IA "interpreta" uma fonte primária?: Aqui os usuários podem solicitar o GPT-3 a analisar e interpretar uma seleção de fontes primárias. O GPT-3 tentará oferecer o contexto, propósito, público-alvo da fonte e possíveis interpretações historiográficas da fonte.
3. Uma IA pode simular uma visão de mundo histórica?: Nesta seção, os usuários podem fazer perguntas a uma IA instruída a imitar uma figura da história: Francis Bacon (1561-1626), ex-lorde Chanceler da Inglaterra sob a rainha Elizabeth I e o rei James I e e uma figura -chave na revolução científica.
4. Objetivos, métodos e reconhecimentos do projeto: explora os objetivos deste projeto, alguns dos métodos utilizados e agradecem aqueles que contribuíram para este projeto.

Objetivos do projeto

Este experimento de história digital explora o potencial das aplicações de IA para pesquisa acadêmica e como força para desinformação. O projeto usa o modelo GPT-3 da OpenAI como um estudo de caso devido à sua acessibilidade e posição como objeto de estudos e debates científicos robustos.

Em maio de 2022, as descobertas iniciais deste projeto foram apresentadas ao Grupo de Trabalho da História Digital para o Consórcio de História da Ciência, Tecnologia e Medicina. As descobertas são expandidas em um artigo acadêmico atualmente em revisão por pares.

Métodos

O projeto emprega o StreamLit para executar scripts em Python, chamando a API da OpenAI para o GPT-3. Os resultados do GPT-3 são produtos de avisos especializados informados pela pesquisa atual em engenharia imediata. Métodos específicos incluem poucos tiro e raciocínio da cadeia de pensamentos. O repositório GitHub do projeto contém o texto completo desses instruções.

Agradecimentos

Muito obrigado a Abraham Gibson pelo convite ao grupo de trabalho da história digital do CHSTM para compartilhar esta pesquisa e aos colegas William Mattingly, Patrick Wadden e Ian Crowe por seu feedback atencioso.

Este projeto foi apoiado por um semestre sabático concedido pelo Escritório de Assuntos Acadêmicos do Belmont Abbey College. A gratidão é estendida ao Provost Travis Feezell e ao vice -reitor David Williams pelo apoio a esse esforço.