legend.video

Legend.video는 오픈 소스 AI 디렉터입니다. 컨셉을 설명하시면 Gen AI로 영상을 만들어 드립니다. Legend.video에서 시도해 볼 수 있습니다.

스크린샷

---

특징

간단한 프롬프트(예: "San Franciso romcom")에서 Legend.video는 먼저 개별 장면으로 구성된 장면이 포함된 스토리보드를 생성합니다. 그런 다음 스토리보드를 편집하고 각 샷에 대해 스틸 이미지를 생성한 다음 스틸 이미지에서 비디오를 생성할 수 있습니다. 출력은 이야기를 전달하는 비디오입니다.

현재 비디오 모델은 스토리를 전달하지 못하는 2~4초 클립을 생성합니다. Legend.video는 2~4초의 짧은 장면으로 스토리를 구성하는 데 도움이 됩니다.

기술

• Next.js 앱 라우터, Tailwind CSS, shadcn/ui
• OAuth(Github 및 Google을 통해) 및 Postgres DB용 Supabase
• 스토리보드 생성을 위한 gpt-4o(그러나 이는 gpt-3.5-turbo 및 함수 호출을 지원하는 모든 모델로 대체 가능)
• 정지 이미지 및 비디오 생성을 위한 Replicate의 텍스트-이미지 및 이미지-비디오 모델
• Vercel에서 https://legend.video/를 호스팅하고 있지만 다른 곳에서도 쉽게 실행할 수 있습니다.
• 우리는 모든 사용자가 처음 200개의 무료 크레딧을 받은 후 추가 생성 크레딧에 대해 사용자에게 요금을 부과하기 위해 Stripe를 사용하고 있습니다.

달리는 방법

.env.example 로컬 .env.local 파일에 복사하여 다양한 환경 변수와 비밀을 설정합니다. 우리는 저장소에 Supabase, Blob 저장소에 Vercel, 로그인에 Github 및 Google, AI 생성에 Replicate를 사용하고 있습니다.

$ cp .env.example .env.local

DB 저장소: Supabase 프로젝트를 시작하고 docs/db_schema.sql 에서 DB 스키마를 미리 로드해야 합니다.

Vercel Blob 저장소: Vercel blobstore를 사용하고 있습니다. 무료 플랜에 Blob 저장소를 만들고 BLOB_READ_WRITE_TOKEN 변수를 채울 수 있습니다.

로그인: 설정에서 GitHub OAuth 토큰을 생성할 수 있습니다. Google의 경우 새 프로젝트를 시작하고 OAuth 키를 만들어야 합니다.

복제: 호스팅된 AI 모델에 복제를 사용하고 있습니다. 여기에서 키를 등록하고 토큰을 REPLICATE_API_TOKEN 에 복사하세요.

그런 다음 다음 명령을 실행하여 종속성을 설치하고 서버를 시작합니다.

 $ pnpm install
$ pnpm run dev

이제 localhost:3000에서 실행 중인 앱을 볼 수 있습니다.

당신이 도울 수 있는 곳

다음 사항에 대해 도움이 필요하면 연락하세요.

1. 샷 사이에 스타일을 일관되게 유지합니다 . 이를 통해 약간의 진전이 있었지만 완벽하지는 않습니다.
2. 장면 사이에 캐릭터 일관성 유지 - 이를 위한 메시지 표시 방법을 실험했지만 보다 정교한 솔루션이 필요합니다.
3. 사운드 - 동영상에 사운드를 추가하는 데 도움이 필요합니다.
4. 메시지를 표시하여 편집 - 사용자가 ChatGPT 스타일로 스토리를 편집할 수 있도록 허용합니다.
5. UI 개선 - UI를 더욱 직관적이고 사용자 친화적으로 만드는 데 도움이 필요합니다.
6. 새로운 모델 - Legend.video를 통해 액세스할 수 있도록 만들고 싶은 더 새롭고 더 나은 비디오 모델에 액세스할 수 있는 경우 알려주십시오. 우리는 그것을 시도해보고 싶습니다.

문제 보고

Github 문제 페이지에서 문제를 보고해 주세요.

기여

버그 수정이나 새로운 기능을 제공하려면 리포지토리를 포크하고 브랜치에서 변경한 다음 끌어오기 요청을 제출하세요. 최대한 빨리 검토해서 괜찮다면 병합하도록 하겠습니다.

스타의 역사

이 저장소에 출연해 주셔서 감사합니다!