chatglm_webui
1.0.0
基於ChatGPT WebUI 的一個簡單的ChatGLM WebUI。
pip install -r requirements.txt
Gradio 版本必須大於3.21.0!
Windows 下CPU 運作需要安裝編譯器,可參考(https://www.freesion.com/article/4185669814/)。
透過git clone https://huggingface.co/THUDM/chatglm-6b-int4
下載模型檔案到根目錄下然後python main.py
即可,預設狀態至少需要4 GB 顯存(CPU 運行則需要5.2 GB 記憶體)。
--path
:指定模型所在資料夾