Фейсмоджи

Голосовой чат-бот, который может имитировать ваше выражение лица.

Это проект Unity (сейчас только для Android), который имеет два модуля.

Одним из них является FaceTracking , который использует OpenCV и Dlib для обнаружения выражений лица, преобразует их в модель Live2D и записывает gif.
Другой — ИИ ~~(чат-бот)~~ , который использует Turing Robot, Iflytek IAT и Iflytek TTS для создания голосового чата.

английский | 简体中文

Релизы

~~Гугл Плей. Facemoji 废萌~~
酷安. Facemoji 废萌
Гитхаб. Facemoji/релизы
Драйв.Google. Facemoji/Платформа
Пан.Байду. Facemoji/Платформа

Настраивать

Загрузите shape_predictor_68_face_landmarks.dat (детектор ориентиров лица) и Facemoji_Plugins_Assets_1.5.0.unitypackage (оптимизированная библиотека ресурсов OpenCV, Dlib, Live2D и Iflytek) с Drive.Google или Pan.Baidu.
git clone https://github.com/huihut/Facemoji.git
Создайте новый проект Unity (называемый FacemojiDemo ).
Скопируйте Facemoji/Assets и Facemoji/ProjectSettings в свой проект Unity ( FacemojiDemo/ ).
Скопируйте shape_predictor_68_face_landmarks.dat в свой FacemojiDemo/Assets/StreamingAssets/
Импортируйте Facemoji_Plugins_Assets_1.5.0.unitypackage
Выберите платформу Android
Стройте и запускайте

Использование

Отслеживание лица

Использование OpenCV и Dlib для обнаружения выражений лица и преобразования их в модель Live2D .

Она может двигаться вместе с вашим лицом, а вы можете попробовать покачать головой.

Записать гифку

В середине вышеперечисленного находится кнопка записи, вы можете записать 3-секундный gif .

Состояние рекордера: Запись (готов к записи) -> Предварительная обработка (запись) -> Приостановлено (сжатие gif) -> Запись (готова к записи)

Сохраните gif в Application.dataPath

(Android в /storage/emulated/0/Android/data/com.huihut.facemoji/files/ )