i Note It

I-Note-It: улучшенный опыт работы с заметками с искусственным интеллектом

• Последние функции

• Как использовать?

• Предварительные условия

• Шаги

• Рекомендуется (только для платформы Win64, к сожалению)

• Альтернатива

• Конфигурация среды

• config.py

• Демонстрация Web Streamlit

• Локальная демо -демо

• За сценой

• Инструменты

• Макет

• Логотип

• Примечание поколения

• Настройка "гиперпараметт"

• Чатбот

• Оригинальный подход

• Окончательный подход

• Языковая модель

• Дизайн пользовательского интерфейса

• Планы и улучшения на будущее

• Участники

• Отчеты об ошибках и запросы функций

• Лицензия

Последние функции?

• Преобразовать текстовый ввод , такой как транскрипты лекций и литература, в упорядоченную и иерархическую форматированную отметки.

• Генерация нот лучше всего работает с английскими транскриптами лекций, которые начинаются и заканчиваются полным словом.

• Протестируемые языки: английский, китайский

• Поддерживаются другой текстовый контент, такой как смайлики, математические формулы и язык программирования (особенно Python ).

• Язык, отличный от английского, поддерживается.

• Способен загрузить файл разметки форматированной ноты.

• Чатбот , который может ответить на подробные запросы, связанные с вводом.

• Например, пользователь может ввести транскрипт лекции класса и генерировать примечание. Затем пользователь может задать вопрос, связанный с введенной лекцией класса.

• Это полезно, когда пользователь хочет иметь более глубокое понимание материала.

Как использовать?

Демо -версия Web Streamlit (устаревшая)

Локальная демо -демо

Предварительные условия

Инструмент	Версия/ссылка
Питон	3.7 - 3.10 (демонстрация использует Python 3.9)
Поток	https://github.com/streamlit/streamlit
Сент-Чат	https://github.com/ai-yash/st-chat
AI21 Studio API -ключ	https://docs.ai21.com/

Шаги

Примечание перед продолжением: если вы хотите иметь локальную версию демонстрации, вам понадобится модель Jurassic-1 на заказ. Для получения дополнительной информации о получении вашей модели не стесняйтесь обращаться в разделах дискуссий или проблем для более подробной информации.

Конфигурация среды

Рекомендуется (только для платформы Win64, к сожалению)

1. Клонировать этот репозиторий GitHub

2. Следуйте инструкциям в требованиях .txt для инициализации среды Conda

Альтернатива

1. Установите пакеты, перечисленные в условиях, предложите использовать Anaconda для управления окружающей средой)

config.py

• Как вы можете заметить или не заметить, для программы требуется config.py, и мы не включили ее для того, чтобы не делиться токеном API.

• Вы собираетесь настроить его в своей местной среде, вот как:

   API_TOKEN = "" NETETAKER_MODEL_URL = "" notebot_model_url = ""

• бывший

   Notebot_model_url = "https://api.ai21.com/studio/v1/j1-jumbo/complete"

• API_TOKEN: ваш клавиша AI21 Studio API

• NoteTaker_Model_URL = URL вашей модели индивидуальной генерации заметок

• Notebot_model_url = URL -адрес вашей модели чат -бота

1. После того, как вы выполните все шаги выше (настроили среду), перейдите в клонированный репозиторий.

2. Перейдите в папку сценариев клонированного репозитория.

3. Создайте файл config.py с контентом в следующем формате

За сценой? ️

Языковая модель

Примечание поколения

Оригинальный подход

• Быстрое инженер (модель Jurassic-1 Grande)

• Просить модель создать заметки, предоставив ей несколько примеров

• Лучше, чем приглашение с нулевым выстрелом, но имеют более высокую задержку

• Просто попросить модель создать заметки без примеров

• Худшая производительность, дайте нелогичные и непоследовательные результаты

• Zero-выстрел

• Несколько снимков

Окончательный подход

• AI21 Lab Mustized Jurassic-1 Grande Model

• Не стесняйтесь обращаться, например, в обсуждениях или проблемах для более подробного объяснения процесса обучения

• Обученная индивидуальная модель генерации нот на вершине Jurassic-1 Grande

• Данные обучения поступают из видео -транскриптов с различных платформ, таких как Canvas, YouTube ， TED Talks и Coursera, охватывающие различные домены/предметы. Кроме того, английская литература, такая как отрывки из Уильяма Шекспира, включены в данные обучения

• В целом лучшая производительность и более низкая задержка, чем оригинальный подход

Настройка "гиперпараметт"

• Примечание не требует слишком большой случайности, но низкая температура делает ноты утомительными. Таким образом, мы сохранили температуру примерно на 0,3, чтобы модель была творческой. Мы также настроили Max-Token от модели, чтобы оптимизировать для лучшего результата генерации заметок

Чатбот

• Lab Lab Lab Jurassic-1 модель Jumbo

• Используйте 3 инструкции в качестве приглашения, см. Notebot.py

• Поправить входной транскрипт в качестве контекста для запроса вопроса

Дизайн пользовательского интерфейса? ️

Инструменты

Инструмент	Использование
Поток	Интерфейс генерации примечания
Сент-Чат	Чатбот для вопросов-ответа
Фигма	дизайн логотипа

Макет

• Для двух основных функций нашего приложения мы позволяем основной функции, текстовому вводу и области примечания, охватываем большую часть верхней области страницы. Затем мы поместили чат -бот ниже в качестве вспомогательной функции.

Логотип

• Три части логотипа соответствуют «I», «Примечание» и «Это» соответственно. Эта идея генерации записей ИИ напоминает нам о том, как люди делали заметки в древнем Китае с помощью писательской кисти, которая потребовала столько усилий и подготовки. Теперь не только «я» изменился с человека на «я», но и кисть для писательской, которую мы использовали для «n» Ote, изменилась на клавиатуру. Мы взволнованы тем, как ИИ принесет больше удобства для других аспектов человеческой жизни, точно так же, как мы примечаем заметки, можно революционизировать ИИ, и точно так же, как этот дизайн логотипа был вдохновлен идеями стабильной диффузии.

Планы и улучшения на будущее

Функции/планы	Специфики
Примечание поколения	специфичный домен и конкретный пользователь больший размер ввода разнообразие входного формата Аудио Видео Веб -URL ... Более богатый формат маркировки, такой как выделение важной информации
Пользовательский интерфейс	Более профессиональный и хорошо продуманный пользовательский интерфейс
Вспомогательные платформы	Несколько платформ
...	...

Участники

• Смотрите внести свой вклад

Отчеты об ошибках и запросы функций

• Смотрите отчет об ошибке

• Смотрите запрос функции

Лицензия

• Смотрите лицензию