CV Ingénieur big data : Recevez gratuitement les profils qui vous intéressent

Exemple de missions de Chen,
Ingénieur big data habitant les Yvelines (78)

• Freelance Ingénieur Big Data, Education Zhixing(Chine)

  Jan 2022 - Jan 2023

  ● Développement d’un data warehouse from scratch
  ● Développement d’un système streaming permettant de calculer des métriques en temps réel
  ● Stack technique: Python, Shell, Hadoop, Hive, Spark, Kafka, Sqoop, Airflow, Cloudera Hadoop,
  Cloudera Manager(Hue, Oozie…), Git

• Freelance Ingénieur Big Data, Mirakl

  Jan 2020 - Jan 2021

  ● Media-building (reconstruction des données de l’image)
  ● Coopération avec des data scientists pour la mise en production de leurs projets AI (product
  categorization, product dépublication,...)
  ● Mise en place de l’infra comme Aws env, Airflow...
  ● Construction du data lake
  ● Industrialisation du processus ETLs
  ● Stack technique: Python, Spark, Delta lake, Databricks, AWS(MWAA, EMR, EC2, S3,
  Redshift…), PostgreSQL, Git, Github Actions, Docker, Airflow

• CDI Ingénieur Big Data, Ogury

  Jan 2016 - Jan 2020

  ● Mise en production de l’algo BHR (reconstitution des historiques de navigation journalières sur
  des centaines de millions d’utilisateurs)
  ● Mise en production de l’algo AUR (reconstitution d’apps usage sur des centaines de millions
  d’utilisateurs)
  ● Mise en production du système de recommandation permettant de proposer aux utilisateurs
  les campagnes éligibles et optimales
  ● Refonte du système targeting pour les campagnes publicitaires
  ● Construction du data warehouse
  ○ Pipelines de data cleansing
  ○ Pipelines de chargement du data warehouse avec les données internes et externes
  ● Industrialisation du processus des ETLs
  ● Stack technique: Scala, Java, Bash, Spark, Hadoop, Hive, MapReduce, Kafka, Redshift,
  Couchbase, AWS(data pipeline, emr, ec2, S3, redshift…), Git, Travis, Docker

• CDI Ingénieur Big Data, Viadeo

  Jan 2013 - Jan 2016

  ● Statistiques pour les comptes recruteurs et les pages d’entreprise”
  ● Migration des consultations des profils de Mysql vers Hbase
  ● Member segmentation & targeting
  ● Stack technique: Sqoop, HDFS, Spark, Scala, ElasticSearch, Java, MapReduce, Hbase

• CDI Ingénieur Java/Jee, Viadeo

  Jan 2009 - Jan 2013

  ● Produits réalisés :
  ○ Tableau de bord : News feed
  ○ Hiring solutions : Espace carrière, Espace recruteur
  ○ Corporate solutions : Panorama, Carrières & jobs, Company Map
  ○ Back office pour les comptes recruteurs
  ○ Batchs (envoi de mails, nettoyage d’offres d’emploi, indexation d’offres d’emploi/
  entreprises...)
  ● Stack technique: Jsp, Servlet, Spring(core, mvc, batch, aop), Solr, JPA, MyBatis, MySql

• CDI Ingénieur Java/Jee, Sextant-SI

  Jan 2008 - Jan 2009

  ● Refonte du logiciel MPI (Management de Services IT)
  ● Stack technique: Jsp, Servlet, Struts, Spring, Hibernate, Oracle