LLM Kitのダウンロード - LLM Kitソースコードのダウンロード

LLM Kit

AI ソースコード

1.0.0

ダウンロード

Suqin (suqin) 言語大規模モデルフルツールチェーン WebUI 統合パッケージ

英語|中文

導入

⛓️ このプロジェクトの目標は、すべての主要言語モデル用のフルプロセスツール WebUI 統合パッケージを実装することです。コードを記述することなく、独自にカスタマイズしたモデルや専用アプリケーションを作成できます。

具体的な機能モジュールは以下のとおりです。

開発と展開

初めて使用する場合は、関連する操作についてのドキュメントを参照することをお勧めします。

ソフトウェア要件

このプロジェクトは、Python 3.8 ～ 3.10、CUDA 11.7/11.8 環境でテストされています。テストは Windows および Linux システムで完了しました。

設置環境

1. 動作環境

 # 拉取仓库
$ git clone https://github.com/wpydcr/LLM-Kit.git

# 进入目录
$ cd LLM-Kit

# 安装依赖
$ pip install -r requirements.txt

依存関係を直接ダウンロードすることもできます: Windows 環境パッケージ、Linux 環境パッケージ。

グラフィックスカードドライバーと cuda を自分でインストールする

2. スクリプトを実行する

Win 環境では、ダブルクリックして web-demo-CN.bat スクリプトを開きます。
Linux 環境の場合は、ダブルクリックして web-demo-CN.sh スクリプトを開きます。

3. 関連プレゼンテーションファイル

大規模モデル接続データベース機能を体験するには、まず関連ファイルをダウンロードしてください。
ロールプレイング機能を体験するには、まず関連ファイルをダウンロードしてください
エクスプレッションパック機能を使用するには、まず関連ファイルをダウンロードし、data/apply/emotion フォルダーに配置してください。

ファイルディレクトリ

env : 統合パッケージ環境
utils : ツールコード
module : 各モジュールコード
- エージェント: エージェント関連のコード
  - chatdb : データベースアクセス関連のコード
  - svc : svc関連コード
  - vits : vits 関連コード
- apply : デモコードを適用します
- model : モデル関連コード
データ: データファイル
- apply : デモ関連ファイルを適用します
  - audio : 生成された音声ファイル
  - 感情: 表現パッケージファイル
  - 再生：文字プロンプトワードファイル
- ドキュメント: ナレッジベースデータファイル
- modeldata : モデルトレーニングデータファイル
  - LLM : 大規模モデルのトレーニングデータファイル
  - 埋め込み: モデルトレーニングデータファイルを埋め込みます
ui : uiインターフェースコード
出力: トレーニング中のチェックポイント
モデル: モデルファイル
- LLM : 言語ラージモデルファイル
- 埋め込み: モデルファイルの埋め込み
- LoRA : LoRA モデルファイル
- live2d_models : live2d モデルファイル
- svc_models : svc関連ファイル
  - Hubert_model : サウンドエンコーダーモデルファイル
  - svc : svcモデルファイル
- vits_pretrained_models : vits モデルファイル

開発ロードマップ

投稿者

呉平裕@juncaisuyun

プロジェクトの全体的なアーキテクチャと技術計画を担当するイニシエーター

Liao Wenbin@中国科学院計算技術研究所

グラデーション、グラフベクトルデータベース、Mysqlデータベース、APIインターフェース統合などのPython開発を担当。

Hu Jucheng@University College LondonUCL

グラフベクターデータベース、live2D、vits、svc、gradient およびその他の Python 開発を担当

李静輝

大規模モデルのトレーニングと推論のバックエンドコード開発を担当します

プロジェクト募集

詳細についてはドキュメントを参照してください

参考と学習

ChatGLM に基づく Langchain アプリケーション

ラクダの中国人モデル

チャットDB

Live2dモデル

チャット-涼宮ハルヒ-

Chuanhu Chat: さまざまな LLM に Web グラフィカルインターフェイスを提供します

オープンソース契約

このリポジトリのコードは、AGPL-3.0 契約に基づいてオープンソースです。

私たちは、オープンソースを通じてプロジェクトの製品化を強化したいと考えていますが、一方で、コミュニティでより実践的なシナリオを吸収し、製品を改善し続けたいと考えています。また、皆様のプロジェクトへの参加も歓迎します。

AGPL-3.0 は、フリーのオープンソースソフトウェアのすべての標準に準拠する OSI 承認のライセンスです。私たちは、オープンソースが常に私たちの当初の目的であり、コミュニティの推進とともにこれを実行し続けると信じています。これは間違いなくもっと良いものを作ります。

おそらく、多くの開発者がこのプロトコルについて疑問を抱いているでしょう。現在、オープンソースコミュニティには、MongoDB、Grafana、Loki など、AGPL-3.0 プロトコルを採用する多くのオープンソースソフトウェアが存在します。Wikipedia には、どのオープンソースプロジェクトが採用されているかのリストもあります。 AGPL -3.0 オープンソースライセンス。

AGPL-3.0 協定には非常に重要な点があります。つまり、上流のオープンソースプロジェクトのコードを変更した後の二次配布バージョンもオープンソースでなければならないということです。この協定は、オープンソースプロジェクトのコードをクローズドソースに転用したい一部の企業を制限しています。プロジェクトの保守チームは、いかなるレベルでも変更せずに企業内でのみ使用される場合、ユーザーは AGPL-3.0 契約によってもたらされる制限を心配する必要はありません。これらの条件は、ソフトウェアを変更したい第三者がプロジェクトやコミュニティに貢献することを奨励することを目的としています。私たちはこれがより公平な方法であり、より強力なコミュニティの構築に役立つと信じています。

簡単に言うと、このプロジェクトのソースコードを変更する場合は、その変更をコミュニティに貢献する必要があり、変更されたコードや派生コードをクローズドソースの商用ソフトウェアとしてリリースおよび販売することは決して許可されません。

この製品を商業目的で再開発、変更、使用する必要がある場合は、AGPL-3.0 に準拠するための商業認可についてお問い合わせください。この契約は、お客様の通常の使用を保証します。。

このほか、個人や法人のニーズに応じたカスタマイズ開発も当社の判断で承ります。

現在、国内の GPL 契約は契約の性格を有しており、我が国の契約法の範囲内にある民事法行為です。プロジェクトチームは訴訟を起こす権利を留保します。

このプロジェクトのオープンソースチームは、このオープンソース契約を解釈する最終的な権利を有します。

引用

プロジェクトで当社のモデル、コード、データを使用する場合は、次の記事を引用してください。

このリポジトリのデータまたはコードを使用する場合は、リポジトリを引用してください。

 @misc{wupingyu2023,
  author={Pingyu Wu},
  title = {LLM Kit},
  year = {2023},
  publisher = {GitHub},
  journal = {GitHub repository},
  howpublished = {url{https://github.com/wpydcr/LLM-Kit.git}},
}