Data Engineer/BI Confirmé – Spark / SQL / Databricks – Lyon

Contexte de la mission

Vous rejoignez une équipe data/BI en charge de la mise en place et de l’évolution de l’architecture décisionnelle : datawarehouse, datamarts, traitements de données et reporting métier.

Objectifs et livrables

Missions

• Analyser les besoins fonctionnels et techniques des métiers

• Localiser et qualifier les données nécessaires

• Concevoir, modéliser et enrichir les datawarehouses et datamarts

• Développer les processus d’intégration de données (ETL / pipelines Big Data)

• Traiter et nettoyer les données, garantir leur qualité

• Participer à la migration vers le cloud, (Databricks )

• Développer et optimiser des traitements Spark

• Produire des rapports et tableaux de bord lisibles pour les métiers

• Accompagner et former les utilisateurs dans l’exploitation des données et des rapports

• Tester, documenter, déployer et maintenir les livrables en conditions opérationnelles

• Participer aux revues de code et à l’amélioration continue de l’architecture décisionnelle

Stack & environnement technique

• Big Data : Spark (essentiel), Hive, Indexima

• Cloud / Data Platform : Databricks (fort enjeu de migration)

• Stockage : Oracle, CEPH S3 (parquet)

• Langages : SQL, Python, PL/SQL, Shell, Java (plus apprécié mais pas obligatoire)

• ETL : Informatica

• Dataviz : Tableau Server

• CI/CD & outillage : Git, Jenkins, Ansible, Terraform

• Ordonnancement : Control-M

• Méthodologie : environnement agile

Profil recherché

• Minimum 5 ans d’expérience sur des fonctions BI / Data Engineer / Ingénieur Décisionnel

• Très bonne maîtrise de SQL

• Solide expérience en modélisation d’entrepôts de données (DWH, datamarts)

• Compétences avérées en traitement et nettoyage de données

• Maîtrise de Spark indispensable

• Expérience en accompagnement métier : ateliers, recueil de besoins, formation, support

• Bon niveau de développement (Spark, SQL, idéalement Python et/ou Java en plus)

Soft skills

• Autonomie, rigueur, sens de la qualité

• Esprit d’équipe, bonnes capacités de communication

• Curiosité, envie de comprendre le métier et les usages data

• Capacité d’analyse et de synthèse

• Force de proposition sur les solutions techniques et décisionnelles