social insights

perspectives sociales

Social Insights est un projet Big Data open source qui génère des informations sur divers sujets intéressants qui se déroulent chaque jour. Actuellement, nous nous concentrons sur l’analyse du sentiment politique en raison des prochaines élections aux États-Unis. Les sources de données incluent l'API Twitter. Il existe un moteur de recherche conçu pour interroger les informations.

Commencer

Le projet se décompose en 3 parties :

• dataproc : toutes les analyses, le travail de base de données et le ML.
• moteur de recherche : le travail de l'API et le système de requête/moteur de recherche
• web : le serveur Web pour restituer la visualisation et intégrer les composants dataproc et moteur de recherche

Conditions préalables

Pour exécuter et configurer le projet, vous devez installer python, node.js et NPM pour les visualisations, qui peuvent être trouvées ici. Pour le traitement des données, vous avez besoin de Python que vous pouvez trouver ici.

Installation

Pour démarrer sur le backend :

 git clone https://github.com/dsc-umass/social-insights.git

pip3 install pipenv

pipenv shell

pipenv install

Pour démarrer sur le site Web :

 git clone https://github.com/dsc-umass/social-insights.git

cd web

yarn install

Développement Django

Premiers pas avec le développement Django

Après avoir créé le shell pipenv pour exécuter le serveur de développement :

 cd webpages

python manage.py runserver

Construit avec

• API Twitter - Analyse des sentiments et analyse des données
• Flask - Cadre API
• PM2 - Serveur de production et équilibrage de charge
• React - Framework frontend pour le site Web
• NLTK - Pour le moteur de recherche