data engineer

Nous recherchons un consultant technique data /data engineer pour une mission longue durée sur Saint Quentin en Yvelines 

La prestation consiste à contribuer à/au(x) :

- Expertise en architecture

- Maîtrise des stacks Data

- -Maintien en condition opérationnelle de la production et support aux équipes de RUN )

- Réponses aux nouvelles demandes de nos bénéficiaires en coordination avec les équipes DIN

- Automatisation de l'administration et des demandes (self-service, API, scripts) en coordination avec le socle et les autres équipes du Groupe

- Mise en place de nouveaux composants

Data : BI, big data, datalake,…

· Automatisation de déploiement des offres de services Data : Big Data (Cloudera), Elastic, NoSQL via Ansible

· Sécurisation des Clusters

· Technical & Data Backup

· DRP

· Monitoring

· Administration des clusters

· Choix des architectures applicatives et techniques

· Accompagnement et formation des équipes de Dev

· Benchmark & Performance Tuning

Environnement technique :

· Architectures Big Data : Lambda, Kappa, Transactionnelle temps réel, Data Lake

· Big Data : Hortonworks Data Platform (HDFS, YARN, Kafka, Spark, Hive, Ranger, Storm, Atlas, ..)

· DevOps : Ansible, Maven, Jenkins, Rundeck, Nexus, Git

· Elastic : ElasticSearch, Beats, Logstash, Kibana

· Bases de données relationnelles

· NoSQL: MongoDB, Neo4j, HBase

·

Livrables attendus:

• Automatisation de déploiement et scripting de tâches de maintenance

• Standardisations techniques

• Choix de l’archi

• Définition des offres de services Data

• Documentation à destination des équipes RUN (Singapour) Anglais obligatoire

Contexte linguistique

• ANGLAIS MAITRISE