legend.video

Legend.video ist Ihr Open-Source-KI-Regisseur. Beschreiben Sie Ihr Konzept, es wird ein Video mit Gen AI erstellt. Sie können es bei Legend.video ausprobieren.

Screenshots

---

Merkmale

Aus einer einfachen Eingabeaufforderung (z. B. „San Francisco Romcom“) generiert Legend.video zunächst ein Storyboard mit Szenen, die aus Einzelaufnahmen bestehen. Anschließend können Sie das Storyboard bearbeiten, Standbilder für jede Aufnahme erstellen und dann aus den Standbildern ein Video erstellen. Das Ergebnis ist ein Video, das eine Geschichte erzählt.

Aktuelle Videomodelle generieren 2–4 Sekunden lange Clips, die keine Geschichte erzählen. Legend.video hilft Ihnen, aus diesen kurzen 2–4-Sekunden-Aufnahmen eine Geschichte zu erstellen.

Technologie

• Next.js App Router, Tailwind CSS, shadcn/ui
• Supabase für OAuth (über Github und Google) und Postgres DB
• gpt-4o zum Generieren von Storyboards (kann jedoch durch gpt-3.5-turbo und jedes Modell ersetzt werden, das Funktionsaufrufe unterstützt)
• Text-zu-Bild- und Bild-zu-Video-Modelle auf Replicate zum Generieren von Standbildern und Videos
• Wir hosten https://legend.video/ auf Vercel, aber Sie können es auch problemlos anderswo ausführen.
• Wir verwenden Stripe, um Benutzern nach den ersten 200 kostenlosen Credits, die jeder Benutzer erhält, zusätzliche Generations-Credits in Rechnung zu stellen.

Wie man läuft

Kopieren Sie .env.example in eine lokale .env.local Datei, um die verschiedenen Umgebungsvariablen und Geheimnisse einzurichten: Wir verwenden Supabase für die Speicherung, Vercel für die Blob-Speicherung, Github und Google für die Anmeldung und Replicate für die KI-Generierung.

$ cp .env.example .env.local

DB-Speicher: Sie müssen ein Supabase-Projekt starten und das DB-Schema von docs/db_schema.sql vorladen.

Vercel Blob-Speicher: Wir verwenden Vercel Blobstore. Sie können mit ihrem kostenlosen Plan einen Blob-Speicher erstellen und die Variable BLOB_READ_WRITE_TOKEN ausfüllen.

Anmeldung: Sie können in Ihren Einstellungen ein GitHub OAuth-Token erstellen. Für Google müssen Sie ein neues Projekt starten und OAuth-Schlüssel erstellen.

Replizieren: Wir verwenden Replicate für ihre gehosteten KI-Modelle. Melden Sie sich hier für einen Schlüssel an und kopieren Sie Ihr Token in REPLICATE_API_TOKEN .

Führen Sie dann diese Befehle aus, um die Abhängigkeiten zu installieren und den Server zu starten:

 $ pnpm install
$ pnpm run dev

Sie sollten nun sehen können, dass die App unter localhost:3000 ausgeführt wird.

Wo Sie helfen können

Wenn Sie bei einem der folgenden Probleme Hilfe benötigen, nehmen Sie Kontakt mit uns auf:

1. Das Styling zwischen den Aufnahmen konsistent halten – wir haben dabei einige Fortschritte gemacht, aber es ist nicht perfekt
2. Die Charaktere zwischen den Aufnahmen konsistent halten – wir haben dafür mit Aufforderungsmethoden experimentiert, aber wir brauchen eine ausgefeiltere Lösung
3. Ton – wir helfen Ihnen gerne beim Hinzufügen von Ton zu den Videos
4. Bearbeiten nach Aufforderung – Erlauben Sie Benutzern, ihre Storys im ChatGPT-Stil zu bearbeiten.
5. Verfeinerungen der Benutzeroberfläche – Wir würden uns freuen, wenn wir dabei helfen würden, die Benutzeroberfläche intuitiver und benutzerfreundlicher zu gestalten
6. Neue Modelle – Wenn Sie Zugang zu neueren und besseren Videomodellen haben, die Sie über Legend.video zugänglich machen möchten, lassen Sie es uns wissen. Wir würden es gerne ausprobieren.

Probleme melden

Bitte melden Sie Probleme auf der Github-Problemseite.

Mitwirken

Wenn Sie Fehlerbehebungen oder neue Funktionen beisteuern möchten, forken Sie bitte das Repo, nehmen Sie Ihre Änderungen in einem Zweig vor und senden Sie dann eine Pull-Anfrage. Wir werden es so schnell wie möglich überprüfen und einbinden, wenn es gut ist.

Sternengeschichte

Vielen Dank, dass Sie dieses Repo als Star markiert haben!