legend.video

Legend.video は、オープンソースの AI ディレクターです。コンセプトを説明してください。Gen AI を使用してビデオを作成します。 Legend.video で試すことができます。

スクリーンショット

---

特徴

簡単なプロンプト (例: 「サンフランシスコ ロマンス」) から、Legend.video はまず個々のショットで構成されるシーンを含むストーリーボードを生成します。その後、ストーリーボードを編集し、各ショットの静止画像を生成し、その静止画像からビデオを生成できます。出力はストーリーを伝えるビデオです。

現在のビデオ モデルは、ストーリーを伝えることができない 2 ～ 4 秒のクリップを生成します。 Legend.video は、2 ～ 4 秒の短いショットからストーリーを構築するのに役立ちます。

テクノロジー

• Next.js アプリルーター、Tailwind CSS、shadcn/ui
• OAuth (Github および Google 経由) および Postgres DB 用の Supabase
• ストーリーボードを生成するための gpt-4o (ただし、これは gpt-3.5-turbo および関数呼び出しをサポートする任意のモデルで置き換えることができます)
• 静止画像とビデオを生成するための Replicate のテキストから画像へのモデルと画像からビデオへのモデル
• 私たちは Vercel で https://legend.video/ をホストしていますが、他の場所でも簡単に実行できます。
• 当社では、Stripe を使用して、各ユーザーが受け取る最初の 200 の無料クレジットの後に、追加の世代クレジットをユーザーに請求します。

走り方

.env.exampleローカルの.env.localファイルにコピーして、さまざまな環境変数とシークレットを設定します。ストレージには Supabase、ブロブ ストレージには Vercel、ログインには Github と Google、AI 生成には Replicate を使用しています。

$ cp .env.example .env.local

DB ストレージ: Supabase プロジェクトを開始し、 docs/db_schema.sqlから DB スキーマをプリロードする必要があります。

Vercel Blob storage: Vercel blobstore を使用しています。無料プランで BLOB ストアを作成し、 BLOB_READ_WRITE_TOKEN変数を入力できます。

ログイン: 設定で GitHub OAuth トークンを作成できます。 Google の場合は、新しいプロジェクトを開始して OAuth キーを作成する必要があります。

Replicate: ホスト型 AI モデルには Replicate を使用しています。ここでキーにサインアップし、トークンをREPLICATE_API_TOKENにコピーします。

次に、次のコマンドを実行して依存関係をインストールし、サーバーを起動します。

 $ pnpm install
$ pnpm run dev

これで、localhost:3000 でアプリが実行されていることが確認できるはずです。

あなたが助けられるところ

次のいずれかについてサポートが必要な場合は、以下までご連絡ください。

1. ショット間のスタイルの一貫性を保つ- これに関してはある程度の進歩はありましたが、完璧ではありません
2. ショット間でキャラクターの一貫性を保つ- このためのプロンプト方法を実験しましたが、より洗練されたソリューションが必要です
3. サウンド- ビデオにサウンドを追加する際のサポートをお待ちしています。
4. プロンプトによる編集- ユーザーが自分のストーリーを ChatGPT スタイルで編集できるようにします。
5. UI の改良- UI をより直感的でユーザーフレンドリーなものにするために、ぜひご協力ください。
6. 新しいモデル- Legend.video からアクセスできるようにしたい、より新しく優れたビデオ モデルにアクセスできる場合は、お知らせください。ぜひ試してみたいと思います。

問題を報告する

Github の問題ページで問題を報告してください。

貢献する

バグ修正や新機能に貢献したい場合は、リポジトリをフォークし、ブランチで変更を加えてから、プル リクエストを送信してください。できるだけ早くレビューし、問題がなければ統合します。

スターの歴史

このレポに注目していただきありがとうございます!