AIrXiv

AIrXiv

AIrXiv ist ein Prototyp für einen LLM-gestützten ArXiv-Forschungsassistenten. Es handelt sich um eine Electron-App mit einem Flask-Backend, das auf der OpenAI-API basiert. AIrXiv basiert auf einem benutzerorientierten OpenAI-API-Schlüssel.

Inhalt

• Hinweise zur Implementierung
• Installation
• Verwendung
• Lizenz

Hinweise zur Implementierung

• AIrXiv versucht, die TeX-Quelle der Artikel zu extrahieren, wenn sie der Datenbank hinzugefügt werden. Schlägt dies fehl, kommt die PDF-Extraktion zum Einsatz.
• AIrXiv verwendet eine einfache Top-k-Ähnlichkeitssuche (standardmäßig k = 3 ) aus einem FAISS-Vektorspeicher. k kann in config.yml zusammen mit der Blockgröße und der Schrittlänge der Blöcke (standardmäßig 512 und 384) festgelegt werden.
• Frontend-Elemente befinden sich in static und Backend-Elemente in util und main.py

Installation

Bitte öffnen Sie ein Problem, wenn Sie Probleme mit der Installation haben.

0. (Voraussetzungen) Stellen Sie sicher, dass Sie über Node.js (LTS-Version empfohlen) und Python >=3.7 verfügen.
1. Klonen und in das Repo cd :

 git clone https://github.com/smsharma/AIrXiv.git
cd AIrXiv

2. Installieren Sie die erforderlichen Python-Pakete mithilfe der bereitgestellten Datei „environment.yml“. Sie können Conda oder einen anderen Umgebungsmanager Ihrer Wahl verwenden:

 conda env create -f environment.yml
conda activate airxiv

3. Installieren Sie die erforderlichen Node.js-Pakete, indem Sie den folgenden Befehl ausführen:

 npm install

Verwendung

Führen Sie die Electron-App mit aus

 npm run dev

Dadurch werden das Python/Flask-Backend ( python main.py oder npm run start-flask ) sowie das Frontend ( npm start ) gestartet. Wenn dies fehlschlägt, versuchen Sie, die beiden Befehle getrennt auszuführen. Fügen Sie eine oder zwei arXiv-IDs hinzu, geben Sie Ihren OpenAI-API-Schlüssel in das Textfeld unten ein und beginnen Sie, Fragen zu stellen!

Nutzungshinweise:

• In den App-Einstellungen kann entweder gpt-3.5-turbo oder gpt-4 ausgewählt werden. gpt-4 ist insbesondere bei der Implementierung von Code deutlich besser, ist aber im Vergleich zu gpt-3.5-turbo etwa eine Größenordnung teurer (~0,02 $/1000 Token) und außerdem unterliegt der API-Zugriff einer Warteliste.
• Die Papierabfrage kann deaktiviert werden, indem in den Einstellungen die Option „Keine Papiere abfragen“ aktiviert wird. Dies hängt dann einfach von den allgemeinen Fähigkeiten des Modells ab.
• Alle Ausgaben sollten auf Integrität überprüft werden.

Lizenz

AIrXiv ist unter der MIT-Lizenz lizenziert.