CV/Mission d'Expert python pandas freelance

Exemple de missions d'Abdellah,
Expert python pandas habitant le Val-de-Marne (94)

Data Engineer Dataiku
CAGIP CRÉDIT AGRICOLE
novembre 2024 - novembre 2025
CONTEXTE
Équipe Plateformes & Référentiels au sein du SI Interne CAGIP assure les opérations de traitement et de
mise à disposition des référentiels et des données CAGIP.
Au quotidien, l’équipes produise :
- Des �ta Product’ permettant aux utilisateurs de la donnée de disposer de sources fiables
- Des pipelines de données servant à alimenter toutes les applications du SI
- Des traitements de Data Quality et d𠆚lerting permettant aux propriétaires des données de les
fiabiliser
◼ Projets : Mise en place des référentiels
◼ Équipe projet : 3 Data Eng, Architecte Data, Tech Lead, PO
◼ Interlocuteurs Internes : Product Owner
ACTIVITÉS : Thème Principale
◼ Conception, développement et industrialisation de pipelines de données robustes et
évolutifs (ELT) sur la Data Platform (Dataiku, Python, SQL Server, PostgreSQL, S3, SFTP, Kafka).
◼ Contribution à la mise en conformité des référentiels du SI CAGIP, garantissant la fiabilité
et la cohérence des données partagées
◼ Intégration de nouvelles sources de données et mise en place d’interfaces Data intersystèmes (facturation, indicateurs GreenPact, reporting métier, référentiels clients).
◼ Automatisation et optimisation de traitements récurrents (performance, monitoring,
réduction des coûts et des temps de calcul).
◼ Accompagnement et conseil auprès des équipes métiers et Data Factory pour l�option
des bonnes pratiques data
◼ Contribution active aux découpages fonctionnels, à l𠆞stimation des User Stories et à
l𠆚mélioration continue dans un contexte Agile / Scrum.
◼ Collaboration étroite avec les Tech Leads et DevOps, participation aux mises en
production et sécurisation de la qualité des données
◼ Collaboration étroite avec les propriétaires de données et les équipes métier pour les
phases de recette et validation fonctionnelle.
◼ Participation au cadre agile de l’équipe (revues de code, peer review, gestion autonome
des développements).
◼ Optimisation des requêtes SQL et lecture des plans d𠆞xécution
◼ Suivi d�tivité du serveur via Grafana
ENVIRONNEMENT TECHNIQUE :
Dataiku 13&14, SQL Server, PostgresSQL, Python, MySQL, (AWS S3, Azure
Synapse Blob Storage, Google BigQuery, Google Cloud Storage), OS : Windows, UNIX, Ubuntu, Outils de
ticketing: Jira, ServiceNow, ITSM. SCP/SFTP, ElasticSearch.

Acensi DATA IA CONSULTANT DATA ENGINEER SENIOR
septembre 2024 - aujourd'hui
Objectifs : La conception et développement d'un POC pour alimentation d'un Data Lakehouse ouvert en utilisant
les dernières technologies (Apache Airflow, Apache Spark, NoSQL, Hive, DBT, MINIO, AWS etc.) pour répondre aux
exigences de l&rsquoentreprise (Projet Data IA interne)
Projet s : Mise en place un Data Lakehouse
Équipe projet : 3 consultants, 1 Expert technique et 1 Chefs de Projets
Interlocuteurs Internes : Chefs de projets
DOMAINE D&rsquoINTERVENTION :
&bull Mise en &oeliguvre des pipelines d&rsquoingestion et d&rsquointégration de données à partir de MySQL Serveur
&bull Etude de cas d&rsquointégration de données à partir de diverses sources tout en s&rsquoassurant la qualité et la cohérence des données.
&bull Support Utilisateurs et animation des ateliers de travails
&bull Gestion des incidents (ITSM), (Jira)
&bull Participation à la mise en place de la chaine CI/CD via Jenkins
&bull Suivi d&rsquoactivité du server BDD via Grafana
&bull Optimisation des requêtes SQL et lecture des plans d&rsquoexécution
ENVIRONNEMENT TECHNIQUE :
&bull MySQL Server
&bull Postgres
&bull Apache Airflow
&bull Apache Spark
&bull Trino requetage SQL
&bull HiveMetastore
&bull MINIO OBJECT STORE (similar à AWS S3)
&bull OS : Windows, UNIX
&bull Ordonnanceur : Airflow
&bull Outils de ticketing: Jira, Darwin, ITSM

TECH LEAD DECISIONNEL (SAP BI4, TALEND)
Informatique Caisse Dépôts Et Consignations
septembre 2023 - juillet 2024
Objectifs : Gestion de deux plateformes décisionnelles (Talend et SAP BI4). Ma mission avait pour objectif de réaliser
la maintenance et les différentes évolutions sur la plateforme Talend et SAP BI4.
Projet s : Gestion de la plateforme Talend SAP BI4
Équipe projet : 7 consultants Décisionnel, 1 Expert technique et 1 Chefs de Projets
Interlocuteurs Internes : Chefs de projets
Interlocuteurs Externes : Direction de production (SGBD, Windows, Unix, Sécurité, Flux, etc.), MOA, Responsable MOE
DOMAINE D&rsquoINTERVENTION :
&bull Administration de la plateforme Talend via la TAC et SAP BI4 via CMC
&bull Suivi de l&rsquoétat des services de la plateforme (saturation, redémarrage, suivi de prod, etc.)
&bull Support Utilisateurs et animation des ateliers de travails (MOE Talend) &ndash 380 utilisateurs
&bull Support Utilisateurs SAP BI4 (MOE, MOA) &ndash 1000 utilisateurs
&bull Gestion des incidents (ITSM), demandes MOA, MOA (Jira)
&bull Participation à la mise en place de la chaine CI/CD via Jenkins
&bull Echanger régulier avec les éditeurs sur les différentes sujets complexes
&bull Participation à la migration des projets Talend 5.3 vers 7.3 et 8.0
&bull Suivi d&rsquoactivité du server BDD via Grafana
&bull Optimisation des requêtes SQL et lecture des plans d&rsquoexécution
&bull Optimisation des procédures stockées
&bull Partitionnement des tables
ENVIRONNEMENT TECHNIQUE :
&bull SQL Server 2014
&bull Talend Integration Suite 5.3 & 7.3
&bull Business Objects 4.2
&bull Tableau Software
&bull OS : Windows, UNIX
&bull Ordonnanceur : Control_M
&bull Outils de ticketing: Jira, Darwin, ITSM
&bull DevOps : Jenkins, Bitbucket, GitHub, CI/CD

CONSULTANT DATA ENGINEER SENIOR
BNP Paribas ITG
février 2020 - juillet 2023
Contexte : Application à destination de l&rsquoensemble des collaborateurs du groupe BNP (au niveau international)
2 finalités :
- Mettre à disposition des collaborateurs de formations (présentiel, e-learning,&hellip) en fonction de leur profil et des données
collectées
- Publication des offres de postes (mobilité internes) à destination de publics ciblés en fonction de leur profil (fonction, zone
géographique, niv d&rsquoexpérience, tec.)
Ma présence au sein de l'équipe Data était axée sur plusieurs aspects.
- Collecte, analyse et interprétation des ensembles des données pour fournir des informations exploitables au Métier.
- Gestion et l'amélioration de la qualité des données, le développement de pipelines ETL pour assurer la cohérence des
données et permettre aux Data Scientists de réaliser des rapports et tableaux de bord, dans le but de faciliter la prise de
décision.
Méthodologie projet : Agile SCRUM
Volumétrie de données : 160 Tera
Composition de l&rsquoéquipe : Business Analyst, 3 Data Engineers et Product Owner
DOMAINE D&rsquoINTERVENTION:
Data Engineering
&bull Acquisition et stockage de flux de données par transferts CFT
&bull Développement, déploiement et monitoring des solutions Big Data pour le métier RH (Hadoop, Spark-scala, Hive, Dataiku)
&bull Vérification et évaluation des workflow
&bull Création de scripts de matching entre les collaborateurs et les offres d&rsquoemploi et formation
&bull Construction et delivery des projets dans DataHub, DataLake et Dataviz
&bull Mise en place des nouveaux flux de données et création de scripts d&rsquoingestion de données
&bull Ingestion d'une variété de sources de données et indexation avec Solr
&bull Mise en place des versioning des composants (Spark, HDP, JRE)
&bull Suivi et réalisation des mises en production avec les équipes de production
&bull Participation à l&rsquoenrichissement de la documentation technique
&bull Mise en &oeliguvre des actions correctives à court et moyen terme
ENVIRONNEMENT TECHNIQUE :
&bull HortonWorks HDP 2.6 (Ambari, Ranger, Hadoop, Hue) migration vers CDP v.7
&bull ITG DevOps Platform CI /CD
&bull Spark-Scala, Jupyter Notebook, GitLab, HQL, Dataiku, Maven, Hue, Shell, Jenkins, Jira Control-M, Ansible Awx, Scripting
Bash/Unix, Oozie, Hive, Spark, git, linux, HDFS, Kerberos, Artifactory
Méthodologie Agile / Scrum

CONSULTANT DATA ENGINEER CONFIRME
Informatique Caisse Dépôts Et Consignations
janvier 2019 - février 2020
Projet : DataLake pour le SI Finance de la Caisse des Dépôts et des Consignations.
Objectif : Mise en place d&rsquoun DataLake pour le Système d&rsquoInformation Finance afin de regrouper les données
structurées en provenance de bases de données relationnelles en couloir ou en colonne, ainsi que les données semistructurées telles que les CSV, les logs, les XML, les JSON. Également, les données non structurées telles que les
emails, les documents et les PDF (certaines données binaires telles que des images, des fichiers audios ou des vidéos
sont également stockées et mises à dispositions).
Les données du DataLake ont ensuite été retraitées et restructurées selon des besoins fonctionnels pour les exposer et faciliter les
accès à un outil de restitution (notamment Tableau Software)
Résultat : Le projet est en production depuis Mars 2019 et différentes évolutions ont été réalisées.
Composition de l&rsquoéquipe : 3 Data Engineering et 1 Chef de Projet
DOMAINE D&rsquoINTERVENTION :
Data Engineering
&bull Mise en place de l&rsquoingestion et de l&rsquoexposition des données du SI Finance dans le DataLake
&bull Industrialisation des traitements d&rsquoalimentation en fonction des prérequis du socle Big Data d&rsquoiCDC
&bull Suivi et réalisation des mises en production avec les équipes de production d&rsquoiCDC
&bull Relationnel avec la Maîtrise d&rsquoOuvrage pour la validation des besoins fonctionnels, l&rsquoassistance et suivi des recettes
&bull Participation à l&rsquoenrichissement du confluence interne d&...