fgpt

Ein kostenloses Reverse-Proxy- und CLI-Tool für OpenAI GPT-3.5-turbo

Damit können Sie die GPT-3.5-API nutzen, ohne sich für einen API-Schlüssel anmelden oder für die Nutzung bezahlen zu müssen.

? Die Nutzung von OpenAI GPT-3.5-turbo ist kostenlos, ohne Konto oder API-Schlüssel
? NICHT IN DER PRODUKTION VERWENDEN, NUR FÜR DEN PERSÖNLICHEN GEBRAUCH/TEST

Merkmale

• Im REPL- Modus können Sie Fragen eingeben und interaktiv Antworten erhalten
• Im Reverse-Proxy-Modus können Sie die OpenAI OpenAPI mit einem lokalen Server verwenden
• CLI-Modus mit Shell-Pipe, Dateieingabe, Codeausgabe usw.
• ? Unterstützt https-Proxy und Sock5-Proxy

Laden Sie die vorkompilierte Binärdatei herunter

• Ausführbare Linux x64-Binärdatei
• Ausführbare Binärdatei für Mac M1/M2
• Windows (bald erhältlich)
• Oder über Docker
• Oder aus dem Quellcode erstellen (siehe unten, Fracht ist erforderlich)

  cargo install fgpt

Wie zu verwenden

 # To get answers from GPT-3.5
fgpt " How to get a domain's MX record on linux shell? "

# Output plain code -c/--code
fgpt -c " Write python code to reverse a string "

# With pipe
cat README.md | fgpt " summarize for reddit post "

# With stdin
fgpt " Convert the follow csv data to json, without any description " < contacts.csv

# With file -f/--file
fgpt -f contacts.csv  " Convert the follow csv data to json, without any description "

# REPL mode
fgpt
>> Write a javascript code to reverse a string
...

Mit http-Proxy

Wenn Sie keine Verbindung herstellen können, können Sie versuchen, einen Proxy zu verwenden. HTTP- und SOCKS5-Proxys werden unterstützt. Zum Beispiel:

 # 1. pass the proxy address by -p/--proxy
fgpt -p ' socks5://127.0.0.1:9080 ' " Linux command to list files in a directory "

# 2. pass the proxy address by environment variable
export HTTPS_PROXY= ' socks5://127.0.0.1:9080 '
fgpt " Linux command to list files in a directory "

# 3. use alias to set the proxy address
alias fgpt= ' fgpt -p "socks5://127.0.0.1:9080" '
fgpt " Linux command to list files in a directory "

Dump-Statistiken

fgpt --stats " Linux command to list files in a directory " 

Verwendung durch Docker

docker run -it --rm shenjinti/fgpt " Linux command to list files in a directory " 

So verwenden Sie Reverse Proxy

Bietet kostenlosen, selbst gehosteten API-Zugriff auf ChatGPT. Dies ist nützlich, wenn Sie die OpenAI-API nutzen möchten, ohne sich für einen API-Schlüssel anmelden zu müssen.

1. Starten Sie den Server

fgpt -s 127.0.0.1:4090

Ihr lokaler Server läuft nun und ist erreichbar unter: http://127.0.0.1:4090/v1/chat/completions

2. Beispielverwendung mit OpenAI-Bibliotheken

 import openai
import sys
openai . api_key = 'nothing'
openai . base_url = "http://127.0.0.1:4090/v1/"

completion = openai . chat . completions . create (
    model = "gpt-3.5-turbo" ,
    messages = [
        { "role" : "user" , "content" : "Write a javascript simple code" },
    ],
    stream = True ,
)

for chunk in completion :
    print ( chunk . choices [ 0 ]. delta . content , end = '' )
    sys . stdout . flush ()

print ()

oder mit Curl testen:

curl -X POST -H " Content-Type: application/json " -d ' {"model":"gpt-3.5-turbo",
"messages":[{"role":"user","content":"Write a javascript simple code"}], 
"stream":true} ' 
http://127.0.0.1:4090/v1/chat/completions

curl -X POST -H " Content-Type: application/json " -d ' {"model":"gpt-3.5-turbo",
"messages":[{"role":"user","content":"Write a javascript simple code"}]} ' 
http://127.0.0.1:4090/v1/chat/completions