Скачать asktube - Скачать исходный код asktube

asktube

AI Исходный код

v0.2.6

Скачать

Логотип AskTube

AskTube — сумматор видео YouTube на базе искусственного интеллекта и помощник по контролю качества на базе технологии Retrival Augmented Generation (RAG).

Запустите его полностью на своем локальном компьютере с помощью Ollama или облачных моделей, таких как Claude, OpenAI, Gemini, Mistral и других.

??‍➡️ Демо и скриншот

Демо 21

Демо 22

Демо 23

Посмотрите «Первое демо AskTube» на YouTube.

демо.mp4

? Функции

Работайте даже с видео без субтитров
Нет ограничений по времени видео
Поддержка нескольких поставщиков ИИ
Сосредоточьтесь на реализации RAG
Полностью работать на вашем локальном компьютере

?? Почему существует этот проект?

Я видел несколько репозиториев GitHub, предлагающих сводки видео YouTube на основе искусственного интеллекта , но ни один из них не включает функцию вопросов и ответов .
Я хочу реализовать более комплексное решение, а также получить опыт работы с ИИ для создания собственного приложения RAG.

? Технология

Язык : Python, JS.
Сервер : [email protected], Bun@v1.
Framework/Lib : Sanic, Peewee, Pytubefix, Sentence Transformers, Sqlite, Chroma, NuxtJs/DaisyUI и т. д.
Поставщик внедрения (поставщик анализа) :
- ОпенАИ
- Близнецы
- ВояжАИ
- Мистраль
- Преобразователи предложений (локальные)
Поставщик ИИ :
- ОпенАИ
- Клод
- Близнецы
- Мистраль
- Оллама (местный)
Речь в текст :
- Faster-Whisper (локальный)
- СборкаAI
- ОпенАИ
- Близнецы

?️ Следующие задачи

Как бежать?

При первом запуске программа может работать немного медленно, поскольку необходимо установить локальные модели.

Запустите на своей машине

Убедитесь, что вы установили:
- Питон 3.10
  - Пользователь Windows , загрузите здесь
  - Пользователь Linux, MacOS , используйте homebrew или команду установочного пакета (apt, dnf, etc)
  - Или используйте conda
- Поэзия
  - Пользователь Windows открывает Powershell и запускает:
```
(Invoke-WebRequest -Uri https://install.python-poetry.org -UseBasicParsing).Content | py -
```
  - Пользователь Linux, MacOS открывает Terminal и запускает:
```
curl -sSL https://install.python-poetry.org | python3 -
```
- булочка
- ffmpeg
  - Пользователь MacOS
```
brew install ffmpeg
```
  - Пользователь Linux
```
 # Ubuntu
sudo apt install ffmpeg
# Fedora
sudo dnf install -y ffmpeg
```
  - Windows , следуйте этому руководству. Установите ffmpeg для Windows.

Клонировать репозиторий

git clone https://github.com/jonaskahn/asktube.git

Создайте файл .env в каталоге asktube/engine :
- Локально
- Бесплатно с некоторыми ограничениями
Запустить программу
- Возможно, вам придется сначала запустить:
```
poetry env use python
```
- Откройте terminal/cmd/powershell в каталоге asktube/engine , затем запустите:
```
poetry install && poetry run python engine/server.py
```
- Откройте terminal/cmd/powershell в каталоге asktube/web , затем запустите:
```
bun install && bun run dev
```
Откройте веб-сайт: http://localhost:3000.

С докером (в процессе)

Прежде чем начать

Я создал эти сервисы для образов Docker, но если вы хотите создать локальные образы, запустите build.local.bat для Windows или build.local.amd64.sh или build.local.aarch64.sh для MacOS , Linux
Если у вас есть графический процессор (cuda или rocm), обратитесь к настройкам ENV выше, измените параметры, как указано выше.

Локально

Для начала используйте файл создания local.yaml.
Откройте terminal/cmd/powershell в каталоге asktube

docker compose -f compose/local.yaml pull && docker compose -f compose/local.yaml up -d

После запуска вам необходимо установить модель Ollama qwen2 и llama3.1 для контроля качества.

docker run ollama ollama run qwen2
docker run ollama ollama run llama3.1

Бесплатно (с ограничением скорости)

Вам нужно зайти в Google Gemini и VoyageAI, чтобы зарегистрировать учетную запись и сгенерировать собственные ключи API:
- Gemini бесплатен с вашей учетной записью Google.
- VoyageAI (рекомендовано Клодом) дает вам бесплатные 50 миллионов токенов (огромная сумма), но сначала вам необходимо добавить свою кредитную карту.
Замените настройки ENV в файле докеров бесплатно и запустите докер.
Откройте terminal/cmd/powershell в каталоге asktube

docker compose -f compose/free.yaml pull && docker compose -f compose/free.yaml up -d

Идеально

Использование VoyageAI для встраивания текстов
Используя OpenAI и Claude для контроля качества, зарегистрируйте учетную запись и сгенерируйте свои собственные ключи API.
Замените настройку ENV в идеальном файле докеров и запустите докер.
Откройте terminal/cmd/powershell в каталоге asktube

docker compose -f compose/ideal.yaml pull && docker compose -f compose/ideal.yaml up -d

Результат

Откройте веб-сайт: http://localhost:8080.

Архитектура

Реальная реализация может отличаться от этой работы из-за своей сложности.

1️⃣ Извлеките данные из заданного URL-адреса.

2️⃣ Сохранение встраиваемых субтитров глав

3️⃣ Задавать вопросы (включая дополнительный вопрос)

? Уведомление

Не используйте это для производства. Это было нацелено на конечных пользователей на их локальных машинах.
Не запрашивайте какие-либо дополнительные функции для управления.