AIrXiv

AIrXiv

AIrXiv は、LLM を利用した ArXiv 研究アシスタントのプロトタイプです。これは、OpenAI API を利用した Flask バックエンドを備えた Electron アプリです。 AIrXiv は、ユーザー向けの OpenAI API キーに依存しています。

コンテンツ

• 実装メモ
• インストール
• 使用法
• ライセンス

実装メモ

• AIrXiv は、論文がデータベースに追加されるときに、論文の TeX ソースを抽出しようとします。これが失敗した場合は、PDF 抽出が使用されます。
• AIrXiv は、FAISS ベクトル ストアからの単純な上位 k 類似性検索 (デフォルトではk = 3 ) を使用します。 k 、チャンク サイズとチャンクのストライド長 (デフォルトでは 512 と 384) とともにconfig.ymlで設定できます。
• フロントエンド要素はstaticにあり、バックエンド要素はutilおよびmain.pyにあります。

インストール

インストールで問題が発生した場合は、問題を開いてください。

0. (前提条件) Node.js (LTS バージョンを推奨) と Python >=3.7 があることを確認してください。
1. クローンを作成してリポジトリにcdます。

 git clone https://github.com/smsharma/AIrXiv.git
cd AIrXiv

2. 提供されたenvironment.ymlファイルを使用して、必要なPythonパッケージをインストールします。 Conda またはその他の任意の環境マネージャーを使用できます。

 conda env create -f environment.yml
conda activate airxiv

3. 次のコマンドを実行して、必要な Node.js パッケージをインストールします。

 npm install

使用法

Electron アプリを実行します。

 npm run dev

これにより、Python/Flask バックエンド ( python main.pyまたはnpm run start-flask ) とフロントエンド ( npm start ) が起動されます。これが失敗した場合は、2 つのコマンドを別々に実行してみてください。 arXiv ID を 1 つまたは 2 つ追加し、下部のテキスト ボックスに OpenAI API キーを入力して、質問を始めてください。

使用上の注意:

• gpt-3.5-turboまたはgpt-4はアプリの設定で選択できます。 gpt-4 、特にコードの実装においては大幅に優れていますが、 gpt-3.5-turboと比較して約 1 桁高価 (~$0.02/1000 トークン) であり、さらに API アクセスは待機リストの対象となります。
• 設定で「論文をクエリしない」にチェックを入れることで、論文のクエリをオフにすることができます。これは、単にモデルの一般的な機能に依存します。
• すべての出力の整合性を検証する必要があります。

ライセンス

AIrXiv は MIT ライセンスに基づいてライセンスされています。