دردشة العبث
1.0.0
يدعم تطبيق الدردشة هذا GPT من OpenAI أو LLM المحلي الخاص بك.
لاستخدام GPT من OpenAI، قم بتعيين متغير البيئة OPENAI_API_KEY
على مفتاح API الخاص بك.
لاستخدام llama.cpp محليًا مع محرك الاستدلال الخاص به، قم أولاً بتحميل نموذج كمي مثل Phi-3 Mini، على سبيل المثال:
/path/to/llama.cpp/server -m Phi-3-mini-4k-instruct-q4.gguf
قبل إطلاق العرض التوضيحي، قم بتعيين متغير البيئة OPENAI_API_BASE
:
export OPENAI_API_BASE=http://127.0.0.1:8080
باستخدام Node.js >= الإصدار 18:
npm install
npm start
وافتح localhost:5000
باستخدام متصفح الويب.