facemoji

Un chatbot de voz que puede imitar tu expresión.

Este es un proyecto de Unity (ahora solo para Android), que tiene dos módulos.

Uno es FaceTracking , que utiliza OpenCV y Dlib para detectar expresiones faciales, las convierte en modelos Live2D y graba gif.
La otra es la IA ~~(chatbot)~~ , que utiliza Turing Robot, Iflytek IAT e Iflytek TTS para realizar un chat de voz.

Inglés | 简体中文

Lanzamientos

~~Google Play. Facemoji 废萌~~
酷安. Facemoji 废萌
Github. Facemoji/lanzamientos
Drive.Google. Facemoji/Plataforma
Pan.Baidu. Facemoji/Plataforma

Configuración

Descargue shape_predictor_68_face_landmarks.dat (Detector de puntos de referencia faciales) y Facemoji_Plugins_Assets_1.5.0.unitypackage (Biblioteca de activos optimizada de OpenCV, Dlib, Live2D e Iflytek) desde Drive.Google o Pan.Baidu
git clone https://github.com/huihut/Facemoji.git
Crear un nuevo proyecto de Unity (llamado FacemojiDemo )
Copie Facemoji/Assets y Facemoji/ProjectSettings a su proyecto de Unity ( FacemojiDemo/ )
Copie shape_predictor_68_face_landmarks.dat a su FacemojiDemo/Assets/StreamingAssets/
Importar Facemoji_Plugins_Assets_1.5.0.unitypackage
Seleccione la plataforma Android
Construir y ejecutar

Uso

Seguimiento facial

Usando OpenCV y Dlib para detectar expresiones faciales, las convierte en un modelo Live2D .

Ella puede moverse con tu cara y tú puedes intentar sacudir la cabeza.

Grabar gif

El medio de lo anterior es el botón de grabación, puedes grabar un gif de 3 segundos.

Estado de la grabadora: Grabando (Listo para grabar) -> Preprocesamiento (Está grabando) -> En pausa (Comprimiendo gif) -> Grabando (Listo para grabar)

Guarde el gif en Application.dataPath

(Android en /storage/emulated/0/Android/data/com.huihut.facemoji/files/ )