ai comic factoryダウンロード - ai comic factoryソースコードのダウンロード

ai comic factory

その他のソースコード

1.0.0

ダウンロード

タイトル

絵文字

色から

色に

SDK

固定された

アプリポート

埋め込みを無効にする

短い説明

hf_oauth

hf_oauth_expiration_ minutes

hf_oauth_scopes

AIコミックファクトリー

?‍?

赤

黄色

港湾労働者

真実

3000

間違い

単一のプロンプトで独自の AI コミックを作成する

真実

43200

推論 API

AIコミックファクトリー

最終リリース: AI Comic Factory 1.2

AI Comic Factory は間もなく公式 Web サイト aicomicfactory.app を開設します。

私の他のプロジェクトの詳細については、linktr.ee/FLNGR をご覧ください。

自宅でプロジェクトを実行する

まず、すべてがオープンソースであることを強調したいと思います (ここ、ここ、ここ、ここを参照)。

ただし、このプロジェクトは複製してすぐに実行できるモノリシックなスペースではありません。フロントエンド、バックエンド、LLM、SDXL などのさまざまなコンポーネントを実行する必要があります。

プロジェクトを複製しようとすると、 .envを開くと、いくつかの変数が必要であることがわかります。

プロバイダー構成:

LLM_ENGINE : INFERENCE_API 、 INFERENCE_ENDPOINT 、 OPENAI 、 GROQ 、 ANTHROPICのいずれかを指定できます
RENDERING_ENGINE : カスタムソリューションをコーディングしない限り、現時点では「INFERENCE_API」、「INFERENCE_ENDPOINT」、「REPLICATE」、「VIDEOCHAIN」、「OPENAI」のいずれかを指定できます。

認証構成:

AUTH_HF_API_TOKEN : LLM エンジン (推論 API モデルまたはカスタム推論エンドポイント) に Hugging Face を使用する場合
AUTH_OPENAI_API_KEY : LLM エンジンに OpenAI を使用します。
AUTH_GROQ_API_KEY : LLM エンジンに Groq を使用します。
AUTH_ANTHROPIC_API_KEY : LLM エンジンに Anthropic (Claude) を使用します。
AUTH_VIDEOCHAIN_API_TOKEN : VideoChain API サーバーにアクセスするためのシークレットトークン
AUTH_REPLICATE_API_TOKEN : Replicate.com を使用する場合

レンダリング構成:

RENDERING_HF_INFERENCE_ENDPOINT_URL : カスタム推論エンドポイントを使用する場合に必要です
RENDERING_REPLICATE_API_MODEL_VERSION : VideoChain API サーバーへの URL
RENDERING_HF_INFERENCE_ENDPOINT_URL : オプション、デフォルトは何もありません
RENDERING_HF_INFERENCE_API_BASE_MODEL : オプション、デフォルトは「stabilityai/stable-diffusion-xl-base-1.0」
RENDERING_HF_INFERENCE_API_REFINER_MODEL : オプション、デフォルトは「stabilityai/stable-diffusion-xl-refiner-1.0」
RENDERING_REPLICATE_API_MODEL : オプション、デフォルトは「stabilityai/sdxl」
RENDERING_REPLICATE_API_MODEL_VERSION : バージョンを変更する場合のオプション。

言語モデルの構成 (使用することに決めた LLM エンジンに応じて):

LLM_HF_INFERENCE_ENDPOINT_URL : ""
LLM_HF_INFERENCE_API_MODEL : "HuggingFaceH4/zephyr-7b-beta"
LLM_OPENAI_API_BASE_URL : "https://api.openai.com/v1"
LLM_OPENAI_API_MODEL : "gpt-4-turbo"
LLM_GROQ_API_MODEL : "mixtral-8x7b-32768"
LLM_ANTHROPIC_API_MODEL : "クロード-3-opus-20240229"

さらに、無視しても問題ないコミュニティ共有変数がいくつかあります。これらの変数は、自分の Web サイトやコンピューターで AI Comic Factory を実行するためには必要ありません (これらの変数は、Hugging Face コミュニティとの接続を作成することを目的としているため、公式の Hugging Face アプリでのみ意味を持ちます)。

NEXT_PUBLIC_ENABLE_COMMUNITY_SHARING : これは必要ありません
COMMUNITY_API_URL : これは必要ありません
COMMUNITY_API_TOKEN : これは必要ありません
COMMUNITY_API_ID : これは必要ありません

詳細については、 .envデフォルト設定ファイルをお読みください。変数をローカルでカスタマイズするには、 .env.localを作成する必要があります (シークレットが含まれるため、このファイルはコミットしないでください)。

-> ローカル、クラウドホスト、および/または独自のモデルで実行する場合は、 ?‍ をコーディングする必要があります。

LLM API (大規模言語モデル)

現在、AI Comic Factory は推論エンドポイントを通じて zephyr-7b-beta を使用しています。

複数のオプションがあります。

オプション 1: 推論 API モデルを使用する

これは最近追加された新しいオプションで、Hugging Face Hub のモデルの 1 つを使用できます。デフォルトでは、7b モデルよりも良い結果が得られる zephyr-7b-beta を使用することをお勧めします。

これをアクティブにするには、 .env.local構成ファイルを作成します。

LLM_ENGINE= " INFERENCE_API "

HF_API_TOKEN= " Your Hugging Face token "

# "HuggingFaceH4/zephyr-7b-beta" is used by default, but you can change this
# note: You should use a model able to generate JSON responses,
# so it is storngly suggested to use at least the 34b model
HF_INFERENCE_API_MODEL= " HuggingFaceH4/zephyr-7b-beta "

オプション 2: 推論エンドポイント URL を使用する

Hugging Face Inference Endpoint サービスで実行されているプライベート LLM で AI Comic Factory を実行する場合は、 .env.local構成ファイルを作成します。

LLM_ENGINE= " INFERENCE_ENDPOINT "

HF_API_TOKEN= " Your Hugging Face token "

HF_INFERENCE_ENDPOINT_URL= " path to your inference endpoint url "

この種の LLM をローカルで実行するには、TGI を使用できます (ライセンスの詳細については、この投稿をお読みください)。

オプション 3: OpenAI API キーを使用する

これは最近追加された新しいオプションで、OpenAI API キーを使用して OpenAI API を使用できます。

これをアクティブにするには、 .env.local構成ファイルを作成します。

LLM_ENGINE= " OPENAI "

# default openai api base url is: https://api.openai.com/v1
LLM_OPENAI_API_BASE_URL= " A custom OpenAI API Base URL if you have some special privileges "

LLM_OPENAI_API_MODEL= " gpt-4-turbo "

AUTH_OPENAI_API_KEY= " Yourown OpenAI API Key "

オプション 4: (新規、実験的) Groq を使用する

LLM_ENGINE= " GROQ "

LLM_GROQ_API_MODEL= " mixtral-8x7b-32768 "

AUTH_GROQ_API_KEY= " Your own GROQ API Key "

オプション 5: (新しい、実験的) Anthropic を使用する (Claude)

LLM_ENGINE= " ANTHROPIC "

LLM_ANTHROPIC_API_MODEL= " claude-3-opus-20240229 "

AUTH_ANTHROPIC_API_KEY= " Your own ANTHROPIC API Key "

オプション 6: 別の LLM システムを使用するようにコードをフォークして変更する

もう 1 つのオプションは、LLM を完全に無効にして、別の LLM プロトコルおよび/またはプロバイダー (Claude、Replicate など)、または代わりに人間が生成したストーリー (モックまたは静的データを返すことによって) に置き換えることです。

注意事項

将来的には、AI Comic Factory を簡単にするために修正する可能性があります (例: Claude または Replicate のサポートを追加する)。

レンダリング API

この API はパネル画像を生成するために使用されます。これは、Hugging Face でのさまざまなプロジェクトのために作成した API です。

まだドキュメントを書いていませんが、基本的には他の既存の API の「単なるラッパー™」です。

hysts/SD-XL Space by @hysts
ビデオの作成、オーディオの追加などのためのその他の API。ただし、AI Comic Factory には必要ありません。

オプション 1: VideoChain を自分でデプロイする

ソースコードをクローンする必要があります

残念ながら、VideoChain のドキュメントを書く時間がまだありません。 (その際には、VideoChain の README を参照するようにこのドキュメントを更新します)

オプション 2: レプリケートを使用する

Replicate を使用するには、 .env.local構成ファイルを作成します。

RENDERING_ENGINE= " REPLICATE "

RENDERING_REPLICATE_API_MODEL= " stabilityai/sdxl "

RENDERING_REPLICATE_API_MODEL_VERSION= " da77bc59ee60423279fd632efb4795ab731d9e3ca9705ef3341091fb989b7eaf "

AUTH_REPLICATE_API_TOKEN= " Your Replicate token "