Ingénieur/Lead Data
VALRHONA
8/2023 -
PROJET : industrialisation des déploiements en continue & lead sur les sujets techniques
&bull DevOps :
o Création et gestion des repos Azure DevOps (projets base de données, Data
Factory, Databricks, Azure Functions).
o Mise en place et maintenance des pipelines CI/CD pour assurer des
déploiements jusqu'à l'environnement de recette (QUAL).
o Développement de scripts de déploiement pour les environnements de
production.
o Monitoring de l&rsquoenvironnements PROD pour anticiper les incidents.
o Animation des Daily et chiffrage des US
o Participation au Sprint Planning et Sprint Review
o Mise à jour du board par rapport à l&rsquoavancement et aux fins de sprints
&bull Azure Data Factory (ADF) :
o Développement/tests des pipelines/Dataflows selon les sujets d'évolutions ou de
maintenances
o Amélioration continue de l'existant (optimisation/simplification des flux existants
et mise en place de processus d'automatisation)
o Monitoring de l'ADF PROD
&bull Base de données :
o Gestion de la base de données de DEV et QUAL
o Monitoring de la base de données de PROD
o Préparation de scripts de déploiement pour l'environnement de PROD
Power bi :
o Création de modèles sémantiques
o Modélisation
o Support technique et accompagnement du métier et des business analyst
o Création de Dataflow
o Publication de rapport dans Fabric
o Optimisation des modèles sémantiques et rapports volumineux
Databricks :
o Participation à la mise en place d&rsquoarchitecture Data
o Développement des notebooks & workflows et Catalogues
o Mise en place et développement des pipelines DLT
o Gestion des repos Git
&bull Actions fonctionnelles :
o Recueil du besoin métier
o Animation d'ateliers
o Accompagnement du métier dans la réalisation des rapports Power bi
Environnent technique : Visual Studio, Azure DevOps, SSMS, Azure Data Factory, Power bi, Databricks
Consultant Data Confirmé
LA MAISON DU CHOCOLAT
4/2024 - 5/2024
PROJET : Configuration des pipelines de déploiement de toute la solution Data
&bull Nettoyage et organisation des bases de données (DEV, Recette et Production)
o Analyse et standardisation des bases de données sur les environnements de
développement, de recette et de production pour améliorer leur qualité et leur
cohérence.
o Identification et suppression des données obsolètes, doublons et valeurs inutilisées
pour optimiser les performances des bases.
o Implémentation de processus pour documenter les modifications et garantir la
traçabilité des actions réalisées sur chaque environnement.
&bull Création et gestion de repositories (Repos) par type de projet Data
o Structuration des repositories dans Azure DevOps ou GitHub en fonction des types
de projets (Data Engineering, ETL, Reporting).
o Mise en place de conventions de nommage, d&rsquoorganisation des branches et
d&rsquoutilisation de modèles (templates) pour garantir une collaboration fluide au sein
des équipes.
o Automatisation des politiques de branche et des stratégies de revue de code pour
assurer la qualité des contributions.
Configuration des pipelines CI/CD pour les projets de bases de données et Azure Data
Factory
o Développement de pipelines CI/CD dans Azure DevOps pour déployer
automatiquement les modifications de schémas et les objets des bases de données
(tables, vues, procédures).
o Intégration des pipelines CI/CD pour les projets Azure Data Factory, incluant la
gestion des paramètres et l&rsquoorchestration des déploiements entre environnements.
o Validation des scripts de migration et tests des déploiements pour minimiser les
risques d&rsquoerreurs en production.
&bull Variabilisation des chaînes de connexion
o Remplacement des valeurs codées en dur par des variables dynamiques ou des
paramètres pour simplifier la gestion des configurations des projets.
o Mise en place d&rsquoune gestion centralisée des secrets et des chaînes de connexion via
Azure Key Vault pour renforcer la sécurité.
o Standardisation des configurations entre environnements (DEV, TEST, PROD) pour
faciliter les déploiements CI/CD.
&bull Automatisation des pipelines CI/CD
o Automatisation complète des exécutions CI/CD pour les projets de bases de
données et Azure Data Factory, réduisant les délais de livraison et les risques
d&rsquoerreurs manuelles.
o Implémentation de déclencheurs automatiques (basés sur les commits ou des
planifications spécifiques) pour accélérer les cycles de développement.
o Suivi et monitoring des pipelines pour identifier et résoudre rapidement les
éventuels problèmes liés aux déploiements.
Environnent technique : Visual Studio, Azure DevOps, SQL Server, Azure Data Factory
Consultant Data Confirmé
BUSINESS FRANCE
3/2024 - 4/2024
PROJET : Création de rapport power bi pour le suivi de création de formation chez Business
France
Création de modèles sémantiques
o Définition et mise en &oeliguvre de modèles sémantiques clairs et performants pour
structurer les données en fonction des besoins métier.
Optimisation des performances des modèles grâce à des techniques telles que la
compression, l&rsquoutilisation de mesures calculées (DAX) et des hiérarchies.
o Documentation des modèles pour assurer leur compréhension et leur réutilisation
par les équipes métiers et techniques.
&bull Modélisation et gestion relationnelle dans Dataverse
o Conception et gestion de modèles relationnels complexes dans Microsoft Dataverse
pour intégrer et harmoniser les données métiers.
o Création de relations précises entre tables (un-à-un, un-à-plusieurs) pour garantir
une intégrité et une cohérence des données.
o Intégration des données issues de diverses sources au sein de Dataverse pour un
usage optimal dans les applications Power Platform.
&bull Création de graphiques et adaptation aux templates
o Développement de visualisations percutantes et adaptées aux besoins métiers, en
suivant les meilleures pratiques de design et storytelling.
o Personnalisation et adaptation des rapports aux templates préexistants pour assurer
une cohérence visuelle avec les standards de l&rsquoentreprise.
o Optimisation des graphiques pour garantir leur lisibilité et leur pertinence dans les
tableaux de bord interactifs.
&bull Mise en place du Row-Level Security (RLS)
o Implémentation du RLS pour restreindre l&rsquoaccès aux données en fonction des rôles
et responsabilités des utilisateurs.
o Conception et test des règles RLS avancées pour garantir une conformité totale
avec les exigences de confidentialité des données.
o Documentation et communication avec les équipes métier pour expliquer et valider
les règles de sécurité appliquées.
&bull Publication et planification des rapports sous Microsoft Fabric
o Publication de rapports Power BI sur Microsoft Fabric, en assurant une
synchronisation fluide entre les environnements de développement et de
production.
o Automatisation de la planification des actualisations des rapports pour garantir leur
mise à jour en temps réel.
o Test rigoureux des règles RLS publiées pour valider leur bon fonctionnement dans
l&rsquoenvironnement Fabric.
Environnent technique : Microsoft Fabric, Power bi
Consultant Data Confirmé
GUERBET
9/2022 - 4/2023
PROJET : Accompagner l&rsquoéquipe de la Supply Chain à réaliser les projets Data sur la platform
Cloud Azure
&bull Création et gestion de flux ETL/ELT avec Azure Data Factory et DataFlow :
o Conception, développement et optimisation de pipelines de données robustes
pour répondre aux besoins métiers variés.
o Mise en &oeliguvre de solutions ELT pour le traitement de gros volumes de données
en utilisant Azure Data Flow (data transformations, cleansing, enrichissements).
o Intégration de multiples sources de données (bases SQL, fichiers plats, API, etc.)
avec des flux automatisés et monitorés.
o Résolution des problématiques de performance grâce à des techniques
d&rsquooptimisation (partitionnement, gestion des ressources Data Flow).
&bull Gestion des pipelines de déploiement CI/CD :
o Configuration et gestion des pipelines de déploiement dans Azure DevOps pour
automatiser les processus de déploiement des solutions data sur les
environnements (DEV, TEST, PROD).
o Validation et gestion des stratégies de branche (Git) et intégration continue pour
assurer la qualité et la fluidité des mises en production.
o Suivi des versions et mise en place de contrôles pour garantir la traçabilité des
modifications dans les solutions déployées.
&bull Développement et gestion de Logic Apps :
o Création et déploiement de workflows automatisés avec Azure Logic Apps pour
répondre aux besoins d&rsquointégration d&rsquoapplications et de données.
o Automatisation des tâches répétitives (notamment les notifications et alertes
métiers) et gestion d&rsquoévénements en temps réel via des connecteurs natifs
(Outlook, SharePoint, API REST).
Gestion de bases de données
o Administration et optimisation des bases de données relationnelles (SQL Server,
Azure SQL Database).
o Création et maintenance de schémas de bases de données adaptés aux besoins
analytiques et transactionnels.
o Rédaction de requêtes SQL complexes pour l&rsquoextraction et la transformation de
données.
o Implémentation des procédures stockées, triggers et vues pour automatiser les
traitements récurrents.
&bull Création de rapports Power BI et accompagnement métier
Développement de rapports interactifs et visuellement attrayants pour
permettre une prise de décision éclairée.
o Assistance aux utilisateurs métier pour la définition et la formalisation des
besoins en reporting.
o Expertise en DAX pour créer des formules complexes répondant aux
problématiques métiers spécifiques (calculs dynamiques, mesures
conditionnelles, etc.).
o Mise en &oeliguvre des tableaux de bord avec des fonctionnalités avancées
(segmentation, drill-through, KPI).
&bull Déploiement des solu...