Facemoji

Um chatbot de voz que pode imitar sua expressão.

Este é um projeto Unity (agora apenas para Android), que possui dois módulos.

Um deles é o FaceTracking , que usa OpenCV e Dlib para detectar expressões faciais, convertê-las em modelo Live2D e gravar GIF.
O outro é IA ~~(bot de bate-papo)~~ , que usa Turing Robot, Iflytek IAT e Iflytek TTS para fazer um chat de voz.

Inglês | 简体中文

Lançamentos

~~Google Play. Facemoji~~
酷安. Facemoji
GitHub. Facemoji/lançamentos
Dirigir.Google . Facemoji/Plataforma
Pan.Baidu. Facemoji/Plataforma

Configurar

Baixe shape_predictor_68_face_landmarks.dat (Facial Landmark Detector) e Facemoji_Plugins_Assets_1.5.0.unitypackage (Streamlined OpenCV, Dlib, Live2D e Iflytek Assets Library) do Drive.Google ou Pan.Baidu
git clone https://github.com/huihut/Facemoji.git
Crie um novo projeto Unity (chamado FacemojiDemo )
Copie Facemoji/Assets e Facemoji/ProjectSettings para o seu projeto de unidade ( FacemojiDemo/ )
Copie shape_predictor_68_face_landmarks.dat para seu FacemojiDemo/Assets/StreamingAssets/
Importar Facemoji_Plugins_Assets_1.5.0.unitypackage
Selecione a plataforma Android
Construir e executar

Uso

Rastreamento facial

Usando OpenCV e Dlib para detectar expressões faciais, converte-as no modelo Live2D .

Ela pode se mover com o seu rosto e você pode tentar balançar a cabeça.

Gravar gif

O meio acima é o botão de gravação, você pode gravar gif de 3 segundos.

Estado do gravador: Gravação (Pronto para gravar) -> Pré-processamento (Está gravando) -> Pausado (Compactando gif) -> Gravação (Pronto para gravar)

Salve o gif em Application.dataPath

(Android em /storage/emulated/0/Android/data/com.huihut.facemoji/files/ )