Développeur big data freelance : Nouveaux freelances inscrits et missions récentes déposées

Exemple de missions de Lamine,
Développeur big data habitant les Yvelines (78)

• ENTREPRENARIAT – Automatisation – IA – No-Code
  Jan 2024 - Jan 2024

  • Automatisations - NoCode - IA : Accompagne les petites et moyennes entreprises à
  identifier et à intégrer des solutions IA/Automatisation/No-code de pointe en les
  guidant de manière transparente de la conception, à la réalisation
  • Chatbot Marketing : Aider les entrepreneurs sur Instagram à convertir leurs contenus en
  revenus grâce au Chatbot Marketing

• LEAD DATA ENGINEER

  chez STAGO
  Jan 2023 - Jan 2023

  Projet : Activités en tant que DATA ENGINEER
  Au sein de STAGO. Projet d’ingestion des données remontées par les instruments médicaux.
  Tâches et responsabilités :
  &#10003 Collaborer avec les experts métier pour comprendre les problématiques métier et
  opérationnelles
  &#10003 Assurer le suivi de la production
  &#10003 Conception de pipelines de données : Création des processus pour collecter et transformer
  les données.
  &#10003 Développement de solutions Big Data : Utilisation de Spark, Scala et Python, Databricks
  &#10003 Optimisation des performances : Amélioration de l'efficacité des pipelines de données pour
  un traitement plus rapide.
  &#10003 Gestion de la qualité des données: Assure l'intégrité, la pertinence et la sécurité des données.
  &#10003 Collaboration avec les parties prenantes: Collaboration avec les data scientists et les
  analystes pour répondre à leurs besoins en matière de données.
  &#10003 Formation des membres de l'équipe et Documentation: Forme l'équipe sur les technologies
  et techniques de gestion des données.
  &#10003 Maintenance de l'architecture de données: Veille à la flexibilité de l'architecture pour
  l'ajout de nouvelles sources de données.
  &#10003 Gestion de projet: Manage l’équipe de Data Engineer, garantit le respect des échéances et la
  qualité du travail.
  &#10003 Veille technologique
  &#10003 Mise en place de bonnes pratiques
  Environnement technique :
  &#10003 Framework Spark (dataframe, dataset, rdd)
  &#10003 Langage Scala, Library ScalaTest, Python
  &#10003 Plateforme Databricks
  &#10003 Langage SQL
  Deequ
  &#10003 AZURE DevOps (CI/CD, pipeline, git)
  &#10003 Azure ADLS, Azure Data Factory,
  &#10003 IDE IntelliJ

• SENIOR CLOUD DATA ENGINEER

  chez AXA - Direct Assurance
  Jan 2022 - Jan 2023

  Projet : Activités en tant que DATA ENGINEER
  Au sein du groupe AXA-Direct Assurance. Projet de migration de la plateforme Data vers le Cloud
  Azure. Je travaille en particulier dans la refonte de la solution datawarehouse historique vers le cloud
  Azure(Data ingestion, Data transformation, business, views … etc)
  Tâches et responsabilités :
  &#10003 Collaborer avec les experts métier pour comprendre les problématiques métiers et
  Opérationnelles
  &#10003 Identifier, collecter, explorer, comprendre et intégrer les données nécessaires à la résolution
  des différentes problématiques
  &#10003 Assurer le suivi de la production
  &#10003 Garantir la qualité des données en mettant en place les outils de mesure et de suivi adéquats
  &#10003 Participer, avec l’équipe, au développement de la plateforme sur Azure et à la définition des
  bonnes pratiques de développement
  4/9

  Environnement technique : &#10003 Framework Spark (dataframe, dataset, rdd) &#10003 Langage Scala, Library ScalaTest &#10003 Plateforme Databricks &#10003 Langage SQL &#10003 AZURE DevOps (CI/CD, pipeline, git) &#10003 Azure ADLS, Azure Data Factory, &#10003 IDE IntelliJ &#10003 Format de données (np. Avro, Parquet, JSON, CSV/Excel, Delta)

• BIG DATA ENGINEER

  FREELANCE
  Jan 2018 - Jan 2021

  Projet : Au sein du groupe EDF, projet de réalisation d’un outillage de déploiement permettant de
  standardiser les processus de déploiement des applications en environnement BIG DATA reposant sur
  les outillages DevOps, Tests unitair es des composants de la suite HortonWorks après des montées de
  version.
  Tâches et responsabilités :
  &#61692 Définition de l’architecture
  &#61692 Automatisation des déploiements d’applications Big Data
  &#61692 Collecte des besoins commanditaires
  &#61692 Développement
  &#61692 Montée de version de cluster HDP de 2.5.3 vers 2.6.5
  &#61692 Tests unitaires des composants du cluster après la montée de version.
  &#61692 Support de niveau 3 et suivi des incidents Big Data

  Environnement technique : HDP 2.5.3, 2.6.5 (Kafka, Spark, HBAse, Knox,Hive … ), Scala, Java, Gitlab, Jenkins, Ansible, … etc

• BIG DATA ENGINEER

  UMANIS chez BNP Paribas
  Jan 2018 - Jan 2018

  Projet : Projet de Centralisation des données produites par le processus métiers du SI front et back
  office des clients professionnels et Entreprises.
  Tâches et responsabilités :
  &#61692 Définition de l’architecture

  Environnement technique : Apache Kafka, Apache Flink, Ansible

• Consultant BIG DATA

  chez EDF Période
  Jan 2017 - aujourd'hui

  Projet:Projet de Centralisation des données produites par le processus métiers du SI front et back
  office des clients professionnels et Entreprises. Tâches et responsabilités:
  
  &#61692Définition de l’architecture
  &#61692Développement de chaînes d’automatisation de transfert de données à partir d’un data lake sur un cluster Haddop vers une base relationnelle
  &#61692Développement de chaînes de traitement de données sur ODI: Création de mappings et packages
  &#61692Réalisation de tests de performances et optimisation des développements
  &#61692Assistance à la recette
  &#61692Suivi de l’avancement des sprints
  &#61692Déploiement et suivi dans la production

  Environnement technique : Apache Kafka, Apache Spark, Scala, Hive, Sqoop, HBase , Oracle , Oozie, Shell , Java, Scala

• MIND 7 CONSULTING DEVELOPPEUR BIG DATA chez Colissimo
  Jan 2016 - Jan 2017

  Projet:Capture transformation et diffusion d’un large volume d’évènements colis en temps réel. Développeur Big Data dans une
  équipe chargée de la conception et de la réalisation d’un projet dont le but principal est de diffuser des événements colis aux partenaires concernés Tâches et responsabilités :
  &#61692Capture des événements colis via un topic Kafka
  &#61692Implémentation des règles de filtrages et de sélection des événements à diffuser
  &#61692Mapping de ces événements
  &#61692Stockage des ces événements en format avro/binaire
  &#61692Mise à disposition des donnes grâce à une api play
  &#61692Supervision du flux d’événements en indexant les événements capturés,transformés et/ou stockés avec Elastic Search
  &#61692Réalisation d’une IHM de supervision avec « d3 js»
  &#61692Méthodologie agile

  Environnement technique : Apache Kafka, Apache Spark,Cassandra,Elastic Search,Play FrameWork , Scala

• Stage Big Data/ Business Intelligence

  ORANGE
  Jan 2016 - Jan 2016

  Projet:Extraction transformation et Visualisation en temps réel d’un large volume de données. Développeur Big Data dans une équipe c
  hargée de concevoir et de réaliser une architecture Big Data dont le but est de pouvoir générer des rapports et des tableaux de bords en temps réel sur des données opérationnelles d’Orange Money.
  Tâches et responsabilités :
  &#61692Evaluation de l’architecture et des briques principales le constituant
  &#61692étude et comparaison de différents outilsBig Data (Cassandra,Mongo DB,Striim .. etc)
  &#61692établissement d’un flux de donnée temps réel de la base de donnée opérationnelle (MySQL,Oracle) à la base de donnée historique (Cassandra)
  &#61692extraction des données opérationnelles pour les produiure dans un topic kafka grâce à un data extractors
  &#61692Transformation du flux de données consommé via Spark Streaming

  Environnement technique :Apache Kafka, Apache Spark , Cassandra , Pentaho , Striim , Maxwell NEDJMA TELECOM (ALGERIE)

• Stage développeur

  Web
  2014 - aujourd'hui

  Projet:Développement d’une IHM pour dématérialiser la gestion du planning des salariés
  Tâches et responsabilités :
  &#61692Collecte des spécifications fonctionnelles
  &#61692Diagramme UML
  &#61692Développement Java

  Environnement technique : Eclipse, Java (EE), Design patterns, UML, MySQL