gdansk ai

? Gdańsk AI ?

GdańskAi是一個完整的堆棧AI語音聊天機器人（語音到文本，LLM，文本到語音），並集成到Auth0，OpenAI，Google Cloud API和Stripe-Web App，API和AI

Web API

它使用Stripe提供付款基礎架構，因此用戶可以購買bibs - API令牌。 Auth0用於提供身份驗證和授權。您可以免費使用它們-Auth0每月最多可以免費使用7000個用戶。條紋僅收取購買費用，因此您沒有任何一個持續的費用。

如果要使用這些服務，則必須設置條紋和Auth0帳戶，並將API鍵放入Web .env web-api/ Directory中。

Node.js，TypeScript和Express此處使用

.env

.env_example顯示您必須設置的值

 CHATBOT_API_KEY={whatever you decide; this value is reused among ai-api, web-api and web in this project}
OPEN_AI_API_KEY={go to platform.openai.com, generate and copy-paste api key here}
# Google Cloud API
type=service_account
project_id={project id}
private_key_id=
private_key={multiline private key with structure like this:-----BEGIN PRIVATE KEY-----...-----END PRIVATE KEY-----n}
client_email={project name}@{project id}.iam.gserviceaccount.com
client_id=
auth_uri=https://accounts.google.com/o/oauth2/auth
token_uri=https://oauth2.googleapis.com/token
auth_provider_x509_cert_url=https://www.googleapis.com/oauth2/v1/certs
client_x509_cert_url=https://www.googleapis.com/robot/v1/metadata/x509/{project-name}%40{project-id}.iam.gserviceaccount.com
universe_domain=googleapis.com

# Stripe
STRIPE_SECRET_KEY={sk_...}
STRIPE_PUBLISHABLE_KEY={pk_...}
TOKENS_PRICE_ID={price_some characters here - you need to create a price in Stripe for tokens first and then copy-paste it here}
# TOKENS_PER_TRANSACTION defines how many interactions user can make with AI per single bibs purchase
TOKENS_PER_TRANSACTION=5

# Auth0
AUTH0_ISSUER_BASE_URL='https://{tenant-name}.us.auth0.com'
AUTH0_DOMAIN='{tenant-name}.us.auth0.com'
AUTH0_CLIENT_ID=
AUTH0_CLIENT_SECRET=
AUTH0_AUDIENCE="https://{tenant-name}.us.auth0.com/api/v2/"
AUTH0_SCOPE="openid profile email offline_access"
CLIENT_URL={url pointing to where web is deployed}
AI_API_URL={url pointing to where ai api is deployed}

跑步

• 轉到web-api目錄
• npm install或npm ci
• npm run build
• npm run start或npm run dev可以使用熱率加載

網絡

它目前在Google Chrome中起作用。您可以按GdańskAi徽標記錄音頻，然後再次按下將其發送到Web API。成功響應後，向您播放了收到的音頻。

Next.js此處與Vercel的模板一起使用

.env

.env_example顯示您必須設置的值

 CHATBOT_API_KEY={whatever you decide; this value is reused among ai-api, web-api and web in this project}
CHATBOT_API_URL={url to where api is deployed}


NEXT_PUBLIC_API_URL={url pointing to where api is deployed}
API_URL={url to where api is deployed}

# Auth0
NEXT_PUBLIC_AUTH0_ISSUER_BASE_URL="https://{tenant-name}.us.auth0.com"
NEXT_PUBLIC_AUTH0_CLIENT_ID=
AUTH0_SECRET=
AUTH0_BASE_URL={url pointing to where web is deployed}
AUTH0_ISSUER_BASE_URL='https://{tenant-name}.us.auth0.com'
AUTH0_DOMAIN='{tenant-name}.us.auth0.com'
AUTH0_CLIENT_ID=
AUTH0_CLIENT_SECRET=
AUTH0_AUDIENCE="https://{tenant-name}.us.auth0.com/api/v2/"
AUTH0_SCOPE="openid profile email offline_access"
CLIENT_URL={url pointing to where web is deployed}

跑步

• 轉到web目錄
• npm install或npm ci
• npm run build
• 安裝條紋CLI
• 條紋偵聽 - /webhook stripe listen --forward-to http://localhost:3000/webhook （如果您更改了3000，請調整端口
• npm run start

故障排除

• 您可能會在signup.ts中刪除/評論screen_hint: "signup",

AI API

OpenAI和Google Cloud API在這裡用於提供語音到文本（Whisper-1），LLM（GPT-3.5-Turbo）和文本對語音（Google Cloud Cloud TextTospeechClient）服務。

Python和Fastapi在這裡

.env

.env_example顯示您必須設置的值

 CHATBOT_API_KEY={whatever you decide; this value is reused among ai-api, web-api and web in this project}
OPEN_AI_API_KEY={go to platform.openai.com, generate and copy-paste api key here}
# Google Cloud API start
type=service_account
project_id={project id}
private_key_id=
private_key={multiline private key with structure like this:-----BEGIN PRIVATE KEY-----...-----END PRIVATE KEY-----n}
client_email={project name}@{project id}.iam.gserviceaccount.com
client_id=
auth_uri=https://accounts.google.com/o/oauth2/auth
token_uri=https://oauth2.googleapis.com/token
auth_provider_x509_cert_url=https://www.googleapis.com/oauth2/v1/certs
client_x509_cert_url=https://www.googleapis.com/robot/v1/metadata/x509/{project-name}%40{project-id}.iam.gserviceaccount.com
universe_domain=googleapis.com
PORT=9000

跑步

• 轉到ai-api目錄
• python3 app.py，默認情況下它在端口9000上運行

Auth0設置

創建一個帳戶，然後創建一個新房客。您需要設置：

• 申請

  • API Explorer應用程序（機器到機器）
    • 客戶秘密從這裡獲取
    • 允許交叉驗證
    • 憑據 - 身份驗證方法 - 客戶秘密（郵政）
    • API -AUTH0管理API-授權和所有權限應在右邊的下拉列表中授予
  • 常規的Web應用程序
    • 客戶秘密在這裡
    • 允許的回調URL：格式總共6個URL：URL，URL/回調，url/api/auth/callback-一個URL是Web API URL，另一個是Web URL（示例：http：// local -host：8080：8080，http：// localhost：8080/callback：8080/callback：8080/calltp：8080/api/ap： 3000，http：// localhost：3000/callback，http：// localhost：3000/api/authback/callback in localhost and callback and in localhost and port in Y Your域，並確保您使用正確的協議http/https）
    • 允許的註銷URL：Web API和Web應用程序的URL -http：// localhost：3000和http：// localhost：8080或您的域
    • 允許的Web起源：Web API和Web應用程序的URL -http：// localhost：8080，您的API和AI API域或您的域
    • 允許跨原始身份驗證：允許的CORS應該是Web URL，您的Web API和AI API域
    • 旋轉
    • 憑據 - 身份驗證方法 - 客戶秘密（郵政）

• 蜜蜂

  • Auth0 Management API（系統API）：
    • 機器到機器應用程序：
      • 添加上面列出的兩個應用
      • 通過單擊右側的下拉列表並選擇所有權限並保存，添加所有兩個權限

條紋設置

創建一個帳戶，轉動測試模式，除非您想在生產和處理真實付款中運行它，請轉到開發人員選項卡，然後轉到API鍵。在這裡，您可以找到stripe_secret_key和stripe_publishable_key的值。現在，轉到產品選項卡，添加代表單次購買的產品（一個圍嘴 - 與用戶的AI交互）。創建它後，將PriceID複製並將其放入.env中為Tokens_price_id。

OpenAI設置

創建一個帳戶，轉到platform.openai.com，生成API密鑰，在.env文件中使用它

Google Cloud API設置

創建一個帳戶，轉到IAM＆Admin，然後服務帳戶並創建一個項目 - 您需要項目的ID才能放入.ENV文件中。然後，您需要生成具有憑據的JSON，並將值從文件中提取到.env文件。轉到創建訪問憑據頁面（您可以使用搜索引擎查找鏈接）。然後鍵 - >添加鍵 - >創建新鍵 - > json->創建。您應該獲得憑據。最後，您需要啟用文本到語音API服務，您已經準備好了

致謝

感謝Jeff McJunkin通過從頭開始填寫配置過程並填補文檔中的空白，從而改善了讀數。

執照

GNU GPL V2

引用

如果您在研究中使用此軟件，請使用以下引用：

 @software { Maczan_Gdansk_AI_2023 ,
author = { Maczan, Jędrzej Paweł } ,
title = { {Gdańsk AI - Full stack voice chatbot} } ,
url = { https://github.com/jmaczan/gdansk-ai } ,
year = { 2023 } ,
publisher = { GitHub }
}

作者

jędrzejpawełMaczan於2023年在波蘭的Gdańsk製造