Conception et mise en place d'une architecture Big Data afin de générer des rapports sur la mobilité électrique et d'analyser les courbes de charges pilotées optimisées des véhicules électriques d'ENEDIS.
Ingestion des différents flux de données flux Batchs trimestriels et flux Streaming dans le HDFS du Datalake en format Avro avec Nifi et Kafka.
Création des vues Hive sur chaque flux de données ingérées dans le DataLake
Calcul des différents indicateurs avec Spark Scala
Consolidation Normalisation et agrégation des courbes de charges des Véhicules électriques avec Spark Scala
Simulation des courbes de charges pilotées et non pilotées des VE avec Spark Scala
Modélisations et stockages des indicateurs et des courbes de charge dans HBase
Restitution Visuelles des indicateurs et des courbes de charge avec Tableau Software
Restitution en format CSV Via des APIs REST des indicateurs et des courbes de charges avec Spring Boot Java
MISSION
Conception et mise en place d'un POC d'une plateforme de supervision capable de prédire des anomalies dans les serveurs d'application en production, en analysant les fichiers logs de ces serveurs.
Ingestion des logs des serveurs
Collecte et filtrage en temps réel des logs
Stockage et indexation des événements de logs et d'alarmes d'anomalies
Analyse prédictive des anomalies
Restitution visuelle des alarmes d'anomalies
MISSION
Développement d'une plateforme Web pour la diffusion des informations issues du logiciel de scolarité APOGEE .
Centralisation des informations éparses dans un autre Portail web
Mise à disposition d'outils de visualisation et de statistique sur APOGEE.
Gestion de l'accès des utilisateurs à la plateforme en fonction de leurs profils dans l'annuaire LDAP