Data Engineer LCLF

Nous recherchons un Data Engineer LCLF pour une mission de 6 mois renouvelables sur Charenton le Pont.

Contexte / Objectifs :

Récupérer les données issues de sources externes

• Utiliser la puissance du Datalake
  
• Produire et mettre à disposition automatiquement des agrégats journaliers, hebdomadaires et mensuels.
  
• Mise en œuvre de la chaîne :
  

• Développer dans le respect des règles d’architecture définies
  
• Développer et documenter les user stories avec l’assistance du Product Owner.
  
• Produire les scripts de déploiement
  
• Prioriser les corrections des anomalies
  
• Assister les équipes d’exploitation
  
• Participer à la mise en œuvre de la chaîne de delivery continue
  
• Automatiser les tests fonctionnels
  

Aspects Humains :

• Grande capacité à travailler dans une équipe, en mode Scrum / Kanban.
  
• Bonnes compétences relationnelles et grand sens de la communication (capacité à entrer dans le détail).
  
• Sensible et informé des évolutions technologiques sur les piles logicielles pratiquées.
  

Connaissances techniques :

•   Stockage : HDFS / GCS
  
•   Traitement: Maitrise de l’écosystème Spark / Kafka / Scala
  
•   Planification : Airflow / Composer
  
•   Gouvernance : Apache Atlas / Hive
  
•   Méthodologies : Scrum, Kanban, Git
  
•   DWH : SQL, Oracle / BigQuery
  
•   Delivery : Git, Ansible, Docker, Terraform, Jenkins / Cloud Build
  
•   La connaissance de la plateforme Data GCP est un plus
  
•   La connaissance de la plateforme Amadea/Statmining est un plus
  

Contexte :

La direction Risk Management et Lutte Contre La Fraude propose aux établissements du Groupe et à ses clients, un ensemble de services et prestations dédiés à la Lutte contre la Fraude. Ces services et prestations évoluent en fonction des exigences réglementaires, du déploiement de nouveaux moyens de paiements et de l’évolution de la fraude.

Le client a lancé un projet de construction de son nouveau socle Data. Un chantier de collecte et de refactoring des alimentations et des transformations de données est à réaliser au sein de l’équipe.