AIrXiv

AIrXiv

AIrXiv é um protótipo para um assistente de pesquisa ArXiv com tecnologia LLM. É um aplicativo Electron com backend Flask desenvolvido pela API OpenAI. AIrXiv depende de uma chave de API OpenAI voltada para o usuário.

Conteúdo

• Notas de implementação
• Instalação
• Uso
• Licença

Notas de implementação

• AIrXiv tenta extrair a fonte TeX dos artigos quando eles são adicionados ao banco de dados. Se isso falhar, a extração de PDF será usada.
• AIrXiv usa uma pesquisa simples de similaridade top-k ( k = 3 por padrão) de um armazenamento de vetores FAISS. k pode ser definido em config.yml , junto com o tamanho do pedaço e o comprimento da passada dos pedaços (512 e 384 por padrão).
• Os elementos frontend estão em static e os elementos backend estão em util e main.py .

Instalação

Abra um problema se estiver tendo problemas com a instalação.

0. (Pré-requisitos) Certifique-se de ter Node.js (versão LTS recomendada) e Python >=3.7.
1. Clone e cd no repositório:

 git clone https://github.com/smsharma/AIrXiv.git
cd AIrXiv

2. Instale os pacotes Python necessários usando o arquivo Environment.yml fornecido. Você pode usar o Conda ou qualquer outro gerenciador de ambiente de sua preferência:

 conda env create -f environment.yml
conda activate airxiv

3. Instale os pacotes Node.js necessários executando o seguinte comando:

 npm install

Uso

Execute o aplicativo Electron com

 npm run dev

que inicia o backend Python/Flask ( python main.py ou npm run start-flask ), bem como o frontend ( npm start ). Se isso falhar, tente executar os dois comandos separadamente. Adicione um ou dois ID arXiv, insira sua chave de API OpenAI na caixa de texto na parte inferior e comece a fazer perguntas!

Notas de uso:

• Tanto gpt-3.5-turbo quanto gpt-4 podem ser selecionados nas configurações do aplicativo. gpt-4 é significativamente melhor, em particular na implementação de código, mas é cerca de uma ordem de magnitude mais cara (~$0,02/1000 tokens) em comparação com gpt-3.5-turbo e, além disso, o acesso à API está sujeito a uma lista de espera.
• A consulta de artigos pode ser desativada marcando "Não consultar artigos" nas configurações. Isso depende simplesmente das capacidades gerais do modelo.
• Todas as saídas devem ser verificadas quanto à integridade.

Licença

AIrXiv é licenciado sob a licença MIT.