Data Engineer sénior

Nous recherchons un Data Engineer pour une mission de 12 mois renouvelables sur Vannes.

Contexte :

Intervention pour le compte du Chapitre Data à Vannes:

⚠️Point d'attention : Candidature de profil venant de Vannes ou de ses alentours proches & Présence minimum de 3 jours par semaine sur Vannes

Le Chapitre Data intervient en transverse au sein de l'entreprise. Il recueille et fabrique les cas d'usages Data des différentes Squads de l'entreprise, sur des domaines métiers différents.

Vous serez ainsi amené à travailler pour le compte de différentes Squads avec des interlocuteurs possiblement changeants.

Vous serez également amené à échanger avec les autres membres du Chapitre du site de Vannes mais aussi ceux des autres sites France.

Tâches :

- Participer à la définition de l'architecture Data (en lien avec les architectes et la Squad)

- Concevoir, Affiner et Développer les solutions de collecte et de stockage des données (provenant de multiples sources) afin de le rendre disponibles pour les usages métiers

- Mettre en œuvre les tests unitaires et automatisés

- Déployer le produit dans les différents environnements

- Garantir le bon fonctionnement du produit en production et assurer le suivi / l'assistance / la gestion des incidents

- Accompagner l’évolution des pratiques de l’équipe dans une logique d’amélioration continue de la qualité du code

Attendu :

1 - Contribuer à la Fabrication des Produits des Squads de l'Entreprise dans un environnement Cloudera - en utilisant un framework interne entreprise (sur des activités Big Data)

2 - Etre force de proposition et expertise au sein du Chapitre sur les techno manipulées

Apprécié :

Contribuer à la Fabrication des Produits des Squads de l'Entreprise dans un environnement Teradata (sur des activités BI)

Compétences Techniques :

Langage :

- Spark - spark streaming et batch (requis),

- Kafka (apprécié)

- java (apprécié)

- shell (apprécié)

Stack Hadoop Cloudera

Base de données : (type Hdfs, Hive, Hbase, Phoenix, MongoDB)

DEVOPS : GIT, Jenkins, Artifactory, XL Release, ELK, Grafana

Scrum (cadre agile entreprise)

Apprécié :

- BDD Teradata,

- xDI,

- SQL

- Data viz : Microstrategy