Generating Books with LLMs

Книга о философии искусственного интеллекта, созданная LLM.

Введение

В этом репозитории рассматривается применение моделей большого языка (LLM) для создания философских книг с использованием передовых моделей искусственного интеллекта, таких как GPT-4 (gpt-4-0125-preview), GPT-3 OpenAI (gpt-3.5-turbo-16k), и Джемма Google (gemma:7b). Названия сгенерированных книг следующие:

• GPT-4: Разум, машина и мораль: переход к философским границам искусственного интеллекта (PDF)

• GPT-3: Этическая связь: исследование философских границ ИИ (PDF)

• Джемма-7b: Наследие Тьюринга: философские пересечения с искусственным интеллектом (PDF)

Кроме того, я попытался использовать модель Anthropic Claude 3 Opus . Однако, несмотря на многочисленные попытки и опыт работы с их сервисом, включая возникновение ошибок сервера и достижение лимита токенов в день, получение книги по антропной модели оказалось безуспешным. Несмотря на эти проблемы, этот репозиторий демонстрирует возможности и идеи, полученные благодаря использованию различных программ LLM в философских исследованиях.

Используемые модели

• GPT-3 OpenAI: доступен через API OpenAI.

• GPT-4 OpenAI: доступ через API OpenAI.

• Google Gemma: доступ через OLLAMA (https://ollama.com/). Чтобы получить доступ к модели Gemma, выполните следующую команду в своем терминале:

  ollama pull gemma:2b

Описание файлов Python

• app.py: основной файл, который управляет всем приложением и генерирует книгу.
• utils.py: содержит функции для создания экземпляров моделей LLM.
• Structure.py: генерирует заголовок, структуру и список глав на основе заданной темы, жанра, стиля и профиля книги.
• idea.py: генерирует список идей для обсуждения в каждой главе на основе сгенерированного названия, структуры, списка глав, темы, жанра, стиля и профиля книги.
• writing.py: пишет каждую главу на основе темы, профиля, жанра, стиля, списков глав и идей. Последовательно пишет о возникших идеях, подтверждающих аргументах и ​​исторических фактах.
• Publishing.py: использует библиотеку Python docx для создания файла книги «.docx».

Файлы включены

• .env: содержит информацию о ключах API.

• require.txt: список необходимых библиотек для установки. Чтобы установить их, запустите:

  pip install -r requirements.txt

Дополнительные ресурсы

Для получения более подробной информации о Langchain, поисково-дополненной генерации (RAG) и генерации текста с использованием искусственного интеллекта рассмотрите возможность записаться на этот курс Udemy: Введение в Langchain.