Data ingénieur/Architecte Data

Nous recherchons un profil qui accepterait de passer de freelance à un statut salarié le temps de la mission. 

__________________________________________________________________________________________________________________________________________________________

Dans le cadre de l’évolution d’une plateforme Data stratégique, nous recherchons un Data Engineer ou Architecte Data pour intervenir sur des problématiques d’architecture, d’ingestion et d’optimisation autour de Databricks sur Azure.

Vos missions

Vous interviendrez en tant que référent technique sur la plateforme Data :

• Conception et modélisation des flux de données

• Choix d’architecture sur Databricks

• Audit et optimisation de code (Spark / Python)

• Résolution de problématiques de performance, scalabilité et coûts

• Mise en place et amélioration des pipelines CI/CD

• Automatisation des tâches d’exploitation (catalogues, habilitations, provisioning)

• Mise en place de monitoring (DataDog)

• Réalisation de POC et veille technologique

Vous contribuerez également à la production des livrables d’architecture (HLD / LLD) et au suivi projet en méthodologie Agile.

________________________________________

Environnement technique

• Microsoft Azure (Serverless, Storage Gen2, AKS)

• Databricks (Unity Catalog)

• Apache NiFi & Zookeeper

• Spark / Python

• PostgreSQL

• Git / GitLab

• Power BI

• DataDog

• Méthodologie Agile Scrum

________________________________________

Profil recherché

• Minimum 4 ans d’expérience en Data Engineering ou Architecture Data

• Très bonne maîtrise de Databricks et Azure

• Expérience sur plateformes d’ingestion et data lake

• Capacité à prendre de la hauteur sur l’architecture globale

• Esprit force de proposition

• Une expérience R&D ou IA sur Databricks est un plus

________________________________________

 Niveaux acceptés

• Data Engineer Expérimenté

• Data Engineer Senior

• Architecte Data Expérimenté

• Architecte Data Senior