La Banque Nationale avait le projet d’explorer les technologies Big Data. Pour atteindre cet objectif, le projet consistait à :
- Mettre en place une plateforme Cloudera/Hadoop
- Explorer les technologies Hadoop fournis avec la distribution Cloudera
- Implémenter une analyse de sentiments à partir de données collectées en temps réel à partir de Twitter
- Évangélisation et formation d’un certain nombre d’architectes de données et systèmes sur les technologies Big Data.
- Evangélisation Big Data.
Dans ce cadre, j’ai été chargé de :
- Concevoir l’architecture de la plateforme d’exploration
- De définir le format et les accès pour les données qui serviront pour les tests.
- Sécuriser l’accès à la plateforme et de définir les niveaux d’accès différents des utilisateurs de cette plateforme.
- Mettre en œuvre de la preuve de concept «Analyse des sentiments» à partir des données collectées à partir de Twitter en temps réel.
- Former les architectes de données / solutions sur l’écosystème Big Data
- Agir en tant que Conseiller pour le choix des technologies Big Data / Hadoop et Spark.