La Banque Nationale du Canada ou BNC est un groupe intégré qui propose des services financiers complets à une clientèle de particuliers, de petites et moyennes entreprises (PME) net de grandes entreprises dans son marché national, ainsi que des services spécialisés à l’échelle internationale.
La BNC, Marchés Financiers a deux projets:
- Le premier consiste à déplacer un cluster Hadoop Cloudera de 18 nœuds Cloudera sur site vers l’infrastructure cloud Amazon Web Services.
- Le second est la création d’une preuve de concept (POC) pour une usine de modèles analytiques (boîte noire d’apprentissage automatique) qui sélectionne le meilleur algorithme de prédiction des prix du marchés et des actions.
Dans ce contexte, on m’a charger de :
- Définir la stratégie et la feuille de route de migration du cluster Big Data Cloudera vers le cloud AWS
- Définition et mise en œuvre de la stratégie de sécurité des données AWS pour le cluster.
- Définition et mise en œuvre de la stratégie de surveillance du cluster AWS / EMR / Athena.
- Examiner et soutenir les développeurs pour les traitements par lots Spark / MapReduce
- Conseiller de confiance Big Data (architectures et technologies).
- Conception d’une plateforme d’analyse en temps réel pour ingérer / prévoir les données du marché en temps réel.
- Analyser les journaux des applications Murex pour créer un modèle prédictif de maintenance.
- Travail sur l’implémentation d’un POC pour une fabrique de modèles analytiques.
- Participer en tant que conseiller technologique pour mettre en œuvre le POC de détection de fraude sur le cloud Google.