CV/Mission DISSERTO freelance

Exemple des missions de Naoufal,
freelance DISSERTO résidant dans la Seine-Saint-Denis (93)

• DATA ENGINEER / REFERENT TECHNIQUE

  DESCRIPTION DES INTERVENTIONSGROUPAMA (G2S)
  Jan 2020 - Jan 2024

  PROJET : MISE EN ŒUVRE D’UNE APPLICATION PERMETTANT LA VUE 360 CLIENT ET DE PLUSIEURS FRAMEWORKS DE COLLECTE DE DONNEES EN TEMPS REEL.&#61692 Recueil des besoins Métiers
  &#61692 Participation à la conception de l’architecture technique de la future plateforme
  &#61692 Ingestion d’évènements en temps réel (Kafka + Spark Structured Streaming) pour différents cas d’usage (GRC, Gestion de la flotte automobile, Gestion du parc immobilier …)
  &#61692 Conception et développement (Spark / Scala) d’un Framework de collecte multi-sources, de nettoyage et de stockage des données
  &#61692 Intégration de la chaine CI/CD avec Maven et Sonar
  &#61692 Optimisation (ressources et revue de code) de traitements Spark existants
  &#61692 Mise en place d’un Framework de raffinage de données (Spark/Scala) suffisamment configurable pour rendre accessible les développements Spark aux non-initiés
  &#61692 Réalisation de tests fonctionnels
  &#61692 Développement et exécution des tests unitaires automatiques
  &#61692 Migration de données Cross / Cluster
  &#61692 Agrégation de données dans un DataWarehouse en Spark / Scala
  &#61692 …

  EQUIPE PROJET : X DEVELOPPEURS, X PRODUCT OWNERS, X SCRUM MASTER METHODOLOGIE : SCRUM

• DATA ENGINEER

  UCASE CONSULTING & CLIENT (CONFIDENTIEL)
  Jan 2020 - Jan 2020

  PROJET : DANS LE CADRE DE LA MISE EN ŒUVRE D’UNE APPLICATION D’AUTHENTIFICATION, COLLECTE ET TRAITEMENT DE DONNEES BIOMETRIQUES VIA UNE ARCHITECTURE CLOUD AZURE.
  
  &#61692 Rédaction des spécifications techniques et fonctionnelles
  &#61692 Traitement des données de navigation (coordonnées de souris, clavier) en temps réel via Spark
  &#61692 Création des nouveaux jobs sur des Cloud Azure (ADF, Databricks)
  &#61692 Calcul des métriques relatives à chaque profil (Utilisateur)
  &#61692 Développement d’une application formulaire à l’aide d’Angular
  &#61692 Entrainement d’un modèle Machine Learning (H2O)
  &#61692 Création d’une API de réponse et de calcul
  &#61692 Ecriture des scripts de création des environnements et des clusters
  &#61692 Mise en place de la chaîne d’intégration continue CI/CD
  &#61692 Amélioration des modèles de Machine Learning
  &#61692 Suivi et gestion du versioning avec Git
  &#61692 Déploiement de la solution avec DevOps
  &#61692 Support, formation et accompagnement des collaborateurs Ucase
  &#61692 …

  ENVIRONNEMENT TECHNIQUE : DATABRICKS, JAVA, SPARK, SCALA, PYTHON, EVENTHUB, AZURE, REST API, GIT, JENKINS, AZURE DEVOPS, H2O.

• DATA ENGINEER

  SOCIETE GENERALE
  Jan 2018 - Jan 2019

  PROJET : DANS LE CADRE DE LA LUTTE CONTRE LA FRAUDE ET LE LANCEMENT DE L’OFFRE « INSTANT PAYMENT », MISE EN PLACE D’UNE API DE SCORING DES TRANSACTIONS ET VIREMENTS BANCAIRES. CETTE SOLUTION PERMET DE MODELISER LES HABITUDES CLIENT ET DE BLOQUER LES TRANSACTIONS DOUTEUSES.
  
  EQUIPE PROJET : X DEVELOPPEURS, X PRODUCT OWNERS, X SCRUM MASTER
  METHODOLOGIE : SCRUM
  
  &#61692 Analyse des besoins et étude de faisabilité
  &#61692 Chiffrage des développements
  &#61692 Identification des sources de données en s’assurant de la conformité de leur utilisation
  &#61692 Développement de jobs Spark Scala en mode batch et temps réel pour le calcul des profils (habitudes des clients)
  &#61692 Restitution des alertes en temps réel pour l’ensemble des entités du Groupe (BDDF, Crédit Du Nord) et les marchés
  &#61692 (PART, PRO et ENT)
  &#61692 Suivi du RUN et amélioration continue des modèles
  &#61692 Modélisation, développement et tests des interfaces API pour répondre aux requêtes de la banque
  &#61692 Définition des règles d’accès à la plateforme via API
  &#61692 Mise en place des process de conformité GDPR :
  • Amélioration de la qualité des données
  • Anonymisation des données
  • Purge automatique des données
  &#61692 Mise en place de la chaîne d’intégration continue CI/CD (Git, Jenkins, Nexus, Ansible)
  &#61692 Automatisation des déploiements avec Ansible
  &#61692 Suivi et réalisation des mises en production et résolution de bugs
  &#61692 Coordination entre les différents intervenants (DataScientists, Chefs de projet, Développeurs IHM)
  &#61692 …
  
  MACHINE LEARNING :
  &#61692 Classification des transactions à l’aide des modèles Machine Learning fournis par les DataScientists
  &#61692 Développement de modèles Machine Learning (H2O, Pandas) pour la prédiction du schéma de la fraude
  &#61692 …

  ENVIRONNEMENT TECHNIQUE : HORTONWORKS, JAVA, SPARK, SCALA, PYTHON, HBASE, KAFKA, REST API, GIT, JENKINS, NEXUS, ANSIBLE, PANDAS.

• DATA ENGINEER

  VEOLIA (ENERGY EFFICIENCY)
  Jan 2018 - Jan 2018

  PROJET : AFIN DE REDUIRE LES COUTS DE DEPLACEMENTS ET DE COLLECTE DE VERRE, MISE EN PLACE D’UN SYSTEME DE PREDICTION DU TAUX DE REMPLISSAGE PAR POINT DE COLLECTE BASE SUR LES DONNEES HISTORIQUES.
  
  EQUIPE PROJET : X DEVELOPPEURS, X PRODUCT OWNERS, X SCRUM MASTER
  METHODOLOGIE : SCRUM
  
  &#61692 Enrichissement des API pour le Front
  &#61692 Extraction des données avec BigQuery
  &#61692 Installation et déploiement du Swagger, Maven et Cucumber
  &#61692 Réalisation des tests en Java et Scala sur l’ensemble de la chaîne
  &#61692 Implémentation d’Apache Livy pour la partie API
  &#61692 Transformation des requêtes SQL en jobs Spark

  ENVIRONNEMENT TECHNIQUE : GOOGLE CLOUD PLATFORM (BIGQUERY), HIVE, APACHE LIVY, JAVA, SQL, SPARK SQ, PYTHON.

• DATA ENGINEER

  EDF
  Jan 2017 - Jan 2017

  PROJET : DANS LE CADRE DE LA MISE EN PLACE D’UN PROJET PERMETTANT LA VUE 360° DU MARCHE D’AFFAIRES, AGREGATION ET MIGRATION DE L’ENSEMBLE DES SYSTEMES RELATIONNELS (DONNEES UTILES) VERS UN SYSTEME NON-RELATIONNEL BASE SUR UN DATALAKE ALIMENTE PAR DES JOBS EN MODE BATCH ET TEMPS REEL.
  
  EQUIPE PROJET : X DEVELOPPEURS, X PRODUCT OWNERS, X SCRUM MASTER
  METHODOLOGIE : SCRUM
  
  &#61692 Analyse des besoins exprimés par les Product Owners
  &#61692 Rédaction des spécifications techniques détaillées
  &#61692 Modélisation et dénormalisation des tables Hbase
  &#61692 Participation aux Daily Meeting (méthodologie Agile)
  &#61692 Accompagnement des équipes SQL et alimentation en Kafka
  &#61692 Développement des API pour SalesForce basés sur les données Hadoop
  &#61692 Intégration des donnés en mode batch et temps réel
  &#61692 Calcul des indicateurs et présentation des résultats à SalesForce
  &#61692 Développement de jobs Spark d'agrégation
  &#61692 Développemen...

• PRESENTATION DE REX A ENVIRON 30 CLIENTS (RETOURS D’EXPERIENCE) ET PARTENAIRES : THEME « GESTION DES DONNEES EN TEMPS REEL AVEC SPARK STREAMING PERMETTANT LA VISION 360 (CONNAISSANCE CLIENT) ».
  aujourd'hui

  &#61692 Présentation des différents types de besoins Métiers
  &#61692 Présentation des architectures cibles
  &#61692 Présentation et analyse des différentes couches de traitements en temps réel
  &#61692 Explications et justifications des outils et des Framework utilisés
  &#61692 Descriptif des best practice sur la partie CI/CD
  &#61692 Exposition des résultats de la performance concernant la volumétrie de donnée et le temps de traitements/réponses
  &#61692 Proposition d’architecture cible hybride optimale avec Spark Batch et streaming

  ENVIRONNEMENT : SPARK STREAMING, SPARK BATCH, KAFKA, MANGO DB.

• PROJET UCASE & CLIENT (CONFIDENTIEL): CREATION D’UNE APPLICATION D’AUTHENTIFICATION EN COLLECTANT LES DONNEES BIOMETRIQUES VIA UNE ARCHITECTURE CLOUD AZURE.
  aujourd'hui
  ENVIRONNEMENT : DATABRICKS, JAVA, SPARK, SCALA, PYTHON, EVENTHUB, MICROSOFT AZURE, REST API, GIT, JENKINS, AZURE DEVOPS, H2O.

• DEVELOPPEMENT D’UN OUTIL SPECIFIQUE A LA RECOMMANDATION VIDEO BASE SUR L’IA GENERATIVE

  PROJET UCASEL’IA GENERATIVE
  aujourd'hui

  &#61692 Construction de base de données de tests cibles / Clients
  &#61692 Génération de vidéo à l’aide de différents outils de l’IA générative
  &#61692 Etude d’industrialisation sur GCP
  &#61692 Formation collaborateur Ucase sur les best-practise du projet

  ENVIRONNEMENT : SPARK (+STRUCTURED STREAMING), SCALA, KAFKA, MONGOBD, HADOOP (MR), HIVE, IMPALA, PL/SQL, GESTIONNAIRE DE RESSOURCE : YARN / MESOS, GCP.

• ROLE DE REFERENT TECHNIQUE

  aujourd'hui

  &#61692 Mise en œuvre de l’architecture cible
  &#61692 Evangélisation sur les technologies Data
  &#61692 Planification des jalons
  &#61692 Budgétisation des projets
  &#61692 Identification des ressources (humaines et matériel)
  &#61692 Participation aux séances de recrutement (Tests Techniques)
  &#61692 Intervenant actif au sein de l’équipe Data Engineers afin d’assurer la veille technologique
  &#61692 …
  
  POC :
  &#61692 POC / Migration du DataLake de Cloudera vers le stockage Azure et Databricks
  &#61692 Création des nouveaux jobs sur des Cloud Azure (ADF, Databricks)
  &#61692 …

  ENVIRONNEMENT TECHNIQUE : SPARK (+STRUCTURED STREAMING), SCALA, KAFKA, MONGODB, HADOOP (MR), HIVE, IMPPALA, PL/SQL, YARN / MESOS (GESIONNAIRE DE RESSOURCES), AZURE, AZURE DATA FACTORY, DATABRICKS.