transformer explainer

Трансформаторный объяснитель: интерактивное обучение текстогенеративным моделям

Transformer Explorer — это интерактивный инструмент визуализации, призванный помочь каждому узнать, как работают модели на основе Transformer, такие как GPT. Он запускает живую модель GPT-2 прямо в вашем браузере, позволяя вам экспериментировать с собственным текстом и наблюдать в реальном времени, как внутренние компоненты и операции Transformer работают вместе, чтобы предсказать следующие токены. Попробуйте TransformerExplainer на http://poloclub.github.io/transformer-explainer и посмотрите демонстрационное видео на YouTube https://youtu.be/ECR4oAwocjs.

трансформатор-объяснитель.mp4
Живая демонстрация	Демо-видео

Исследовательская статья

Трансформаторный объяснитель: интерактивное обучение текстогенерирующих моделей . Эри Чо, Грейс С. Ким, Александр Карпеков, Алек Хелблинг, Зиджи Дж. Ван, Сонмин Ли, Бенджамин Гувер, Дуэн Хорнг Чау. Плакат IEEE VIS 2024.

Как запустить локально

Предварительные условия

• Node.js v20 или выше
• НПМ v10 или выше

Шаги

git clone https://github.com/poloclub/transformer-explainer.git
cd transformer-explainer
npm install
npm run dev

Затем в веб-браузере откройте http://localhost:5173.

Кредиты

Трансформаторное объяснение было создано Эри Чо, Грейс С. Ким, Александром Карпековым, Алеком Хелблингом, Джеем Вангом, Сонмином Ли, Бенджамином Гувером и Поло Чау в Технологическом институте Джорджии.

Цитирование

 @article { cho2024transformer ,
  title = { Transformer Explainer: Interactive Learning of Text-Generative Models } ,
  shorttitle = { Transformer Explainer } ,
  author = { Cho, Aeree and Kim, Grace C. and Karpekov, Alexander and Helbling, Alec and Wang, Zijie J. and Lee, Seongmin and Hoover, Benjamin and Chau, Duen Horng } ,
  journal = { IEEE VIS } ,
  year = { 2024 }
}

Лицензия

Программное обеспечение доступно по лицензии MIT.

Контакт

Если у вас есть какие-либо вопросы, не стесняйтесь открыть вопрос или связаться с Эри Чо или любым из участников, перечисленных выше.

Еще больше пояснений по искусственному интеллекту, которые стоит проверить

• Объяснитель Diffusion , чтобы узнать, как Stable Diffusion преобразует текстовую подсказку в изображение.
• Объяснитель CNN
• GAN Lab для игры с генеративно-состязательными сетями в браузере