What Do AIs Know About History

¿Qué saben las IA sobre la historia? Un experimento de historia digital

Contenido

• Descripción del proyecto
• Elementos del proyecto
• Proyecto de objetivos
• Métodos
• Expresiones de gratitud
• Licencia

Descripción del proyecto

Este experimento de historia digital examina la siguiente pregunta: ¿Qué saben AIS sobre la historia? AIS no 'no sabes nada realmente. Pero los avances recientes en el aprendizaje automático han resultado en nuevos modelos computacionales capaces de imitar notable de las capacidades analíticas humanas. Entre los más estudiados de estos modelos se encuentra GPT-3 (transformador generativo previamente capacitado-3). En este experimento de historia digital, los usuarios pueden plantear preguntas históricas para GPT-3 y observar sus respuestas. Este proyecto permite a los historiadores y al público investigar directamente las capacidades históricas de los AI avanzados, y evaluar por sí mismos las posibilidades y los peligros de esta tecnología. Con tal conocimiento, podemos evaluar mejor el impacto potencial de la IA en la comprensión del pasado y considerar las implicaciones más amplias de esta tecnología para el futuro.

Elementos del proyecto

1. ¿Qué "sabe" una IA sobre la historia de AP?: En esta sección, los humanos pueden probar su conocimiento histórico contra el de una IA. Los usuarios pueden responder preguntas de opción múltiple de los planes de estudio de colocación avanzada (AP) para la historia de EE. UU., Europa y mundial, y luego comparar su rendimiento con GPT-3. Acompañando estas preguntas están los datos sobre el rendimiento general de GPT-3 en estas preguntas.
2. ¿Cómo una IA "interpreta" una fuente primaria?: Aquí los usuarios pueden incitar a GPT-3 que analicen e interpreten una selección de fuentes primarias. GPT-3 intentará ofrecer el contexto, el propósito, el público previsto de la fuente de la fuente y las posibles interpretaciones historiográficas de la fuente.
3. ¿Puede una IA simular una cosmovisión histórica?: En esta sección, los usuarios pueden plantear preguntas a una IA instruida para imitar una figura de la historia: Francis Bacon (1561-1626), ex Lord Chancellor de Inglaterra bajo la reina Isabel I y el Rey James I y Una figura clave en la revolución científica.
4. Objetivos del proyecto, métodos y reconocimientos: explora los objetivos de este proyecto, algunos de los métodos utilizados y agradecen a los que contribuyeron a este proyecto.

Proyecto de objetivos

Este experimento de historia digital explora el potencial de las aplicaciones de IA para la investigación académica y como una fuerza para la desinformación. El proyecto utiliza el modelo GPT-3 de OpenAI como un estudio de caso debido a su accesibilidad y posición como sujeto de un sólido estudio científico y debate.

En mayo de 2022, los hallazgos iniciales de este proyecto se presentaron al Grupo de Trabajo de Historia Digital para el Consorcio de Historia de la Ciencia, Tecnología y Medicina. Los hallazgos se amplían en un documento académico actualmente bajo revisión por pares.

Métodos

El proyecto emplea a Streamlit para ejecutar scripts de Python llamando a la API de OpenAI para GPT-3. Las salidas de GPT-3 son productos de indicaciones especializadas informadas por la investigación actual en ingeniería rápida. Los métodos específicos incluyen pocos indicadores de disparos y razonamiento de la cadena de pensamiento. El repositorio de GitHub del proyecto contiene el texto completo de estas indicaciones.

Expresiones de gratitud

Muchas gracias a Abraham Gibson por la invitación al Grupo de Trabajo de Historia Digital de CHSTM para compartir esta investigación, y a los colegas William Mattingly, Patrick Wadden e Ian Crowe por sus pensamientos reflexivos.

Este proyecto fue apoyado por un semestre sabático otorgado por la Oficina de Asuntos Académicos del Belmont Abbey College. La gratitud se extiende al Provost Travis Feezell y al vicecedente David Williams por su apoyo a este esfuerzo.