Missions Data Lake : Postulez aux offres de mission mises en ligne

Résumé d'expériences de Zakaria,
freelance DATA LAKE habitant les Hauts-de-Seine (92)

• Développeur Big-Data

  au sein du projet MI2B (Data-Lake) Chez la Société Générale.
  Jan 2022 - aujourd'hui

  Contexte : MI2B : est un Data-Lake dédié à l’analyse et la mise à disposition des données,métier De la Société Générale.
  Conception et spécification technique
  Développement
  Analyse
  Développement, correction et évolution des flux SPARK, Scala
  Mise en place de SGMonitoring (monitoring des Jobs et de l’environnement)
  Ajout et adaptation des Jobs à OOZIE

  Technologies: CLOUDERA, HDFS, HIVE, HUE, SPARK, SCALA, YARN, GITHUB, JENKINS, ELASTIC-SEARCH, KIBANA, OOZIE.

• Développeur Big-Data au sein du projet One-Data (Data-Lake)

  Chez LOUIS VUITTON.
  Jan 2022 - Jan 2022

  Contexte : ONEDATA : est un Data-Lake dédié à l’analyse et la mise à disposition des données métier LOUIS-VUITTON.
  Conception et spécification technique
  Développement
  Analyse
  Développement, correction et évolution des flux SPARK, Scala
  Evolution et développement des webServices SCALA
  Assurer le fonctionnement de la partie RUN (Monitoring des flux)

  Technologies: CLOUDERA, HDFS, HIVE, Impala, SPARK, SCALA, YARN, BitBucket, JENKINS, ELASTIC-SEARCH, KIBANA, POWERBI, AIRFLOW.

• Développeur Big-Data au sein du projet B4ALL (Data-Lake)

  Chez ENEDIS.
  Jan 2020 - Jan 2022

  Contexte : DLK : est un Data-Lake dédié à l’analyse et la mise à disposition des données métier ENEDIS.
  Conception et spécification technique
  Développement
  Analyse
  Développement et correction des flux SPARK et SPARKSTREAMING
  Evolution des fluxs SPRINGBOOT

  Technologies: Datalab ENEDIS, Hortonworks, CLOUDERA, HDFS, HIVE, HBASE, SPARK, SCALA, JAVA 8, YARN, KAFKA, GITLAB, JENKINS, KUBERNETES, SPRINGBOOT.

• Développeur Big-Data

  au sein du projet VERONE (Data-Lake) Chez EDF.
  Jan 2019 - Jan 2020

  Contexte : SOCLE : est un SI décisionnel dédié à l’analyse des données des clients (marché
  de masse) EDF pour les fidéliser. Ces données sont ensuite exploitées par l’entité commerce
  d’EDF.
  Conception et spécification technique
  Développement
  Analyse
  Correction et évolution des traitements Hadoop

  Technologies: Datalab EDF, Hortonworks, HDFS, HIVE, HBASE, SPARK, JAVA 8, OOZIE, YARN, KAFKA, GITLAB, JENKINS, SONARQUBE, CUCUMBER.

• Assistant à l’installation et à la mise en place d’un cluster Cloudera

  Chez la FFF.
  Jan 2018 - Jan 2019

  Contexte : L’objectif est la mise en place d’un cluster AWS constitué de huit machines avec une préparation et une installation de la distribution CLOUDERA, ainsi que tous les outils « Hive, Impala, Zookeeper, Oozie… » et test de leurs fonctionnalités.
  Création des VMs AWS et installation du CentOS
  Préparation de l’OS pour l’installation d’Hadoop :
  o Configuration des VMs.
  o Installation de MySQL.
  o Créations des bases de données.
  Installation de Cloudera Manager « Server et agents »
  Installation de Cloudera CDH.
  Ajout et test des services « Sentry, HDFS, HBase, YARN, Spark, Sqoop, Hive, Impala,
  Flume, Hue, Oozie, Zookeeper »
  Activation de HDFS et YARN RessourceManager HA.
  Mise en place des platforme Web « Hue »

  Technologies : Cluster AWS, Cloudera Manager, Cloudera CDH, Sentry, HDFS, HBase, YARN, Spark, Sqoop, Hive, Impala, Flume, Hue, Oozie, Zookeeper.

• Data management RH : analyse et reconnaissance des émotions en temps réel

  Jan 2018 - aujourd'hui

  Contexte : L’objectif est de créer à Umanis une solution de Data Science permettant de faire des analyses sur les personnes en entretien « Vidéo », Connaitre leurs émotions et envoyé un rapport d’émotions au RH.
  Développement d’une application de reconnaissance d’émotions.
  Utilisation des modèles machine learning afin d’établir l’analyse émotionnelle.
  Utilisation d’akka stream ou spark streaming pour gérer les flux et les traitements.

  Durée de la mission : suspendu. Technologies : Spark streaming/Scala, AKKA Stream, Machine Learning, Python.

• Stage de fin d'études en IoT "Développement d'une blaise BLE et d'une application mobile"

  Chez ALGORIA
  Jan 2017 - Jan 2018

  o Développement d'une balise BLE " Microcontrôleur Nordic" en temps réel
  (RTOS) en C/C++.
  o Développement d'une application mobile pour la gestion de la balise
  « Android » (JAVA & Android SDK).
  o Utilisation du langage, JAVA sous Eclipse, pour le développement de l’application.

• Mini-projet de Master 2 au laboratoire de l’I

  Créteil rattaché à l’Université de Paris-Est Créteil
  Jan 2017 - aujourd'hui

  Data Science :
  o Découverte et utilisation des APIs « web service de type REST ».
  o Utilisation d'une Base de données (d’image, de fichier audio et texte) pour l’évaluation des modèles Machine Learning inclus dans les APIs.
  o Récolte des résultats obtenues par les APIs en utilisant JAVA avec le test et la validation des résultats « Application des méthodes de la Data Science ».
  o Développement d'un modèle de Machine Learning (Réseau de neurones) pour fusionner et améliorer le résultat.

• Stage de Master 1 au laboratoire du pôle universitaire

  Vélizy 2 rattaché à l’Université de VERSAILLES Saint Quentin en Yvelines
  Jan 2016 - aujourd'hui

  Programmation d'un algorithme statique de reconnaissance faciale avec JAVA en utilisant une Web Cam.
  o Envoie de données vers un autre microcontrôleur via câble USB