Ali - Architecte de données

Data Architect / Engineer

Contexte
Design d’une stack DataStream et développement d’un POC permettant de collecter et traiter des messages provenant
de l’IoT dans un flux temps réel. Restitution des données dans un pipeline ML.
Responsabilités
- Rédaction d’une expression de besoins à partir d’un memo et de diverses collectes métier
- Design d’une stack Kappa étendue
- Définition des prérequis infra, framework et divers outils
- Installation et déploiement de l’environnement complet du POC à partir d’un EC2 en mode bare-metal
- Développement du POC correspondant en mode « hors sol » (PySpark)
- Tests et collecte des metrics avec un jeu de données de 11M de messages
- Portage du POC dans un environnement AWS Managé / Cluster DataBricks
- Développement de deux uses cases en mode NoteBook Databricks
- Parallélisation des notebook (ThreadPool)
- Suivi des développements et accompagnement de l'équipe
- Test de Qualifications (Pré production /Production)
Livrables
- POC Totalement fonctionnel incluant deux uses cases
- Mise en pré-production
- Documentation complète du code et des librairies écrites
- Documentation de l’architecture
- Livraison de tous les fichiers de configuration et bash de déploiement

Data Architect / Engineer

Contexte
Conception et développement d’un DataLake à partir de multiples sources de données hétérogènes et non qualifiées
(DataGouv, Scrapping, Base Client, Base commerciales).
Implémentation da l’API GraphQL avec un bréviaire de requêtes type.
Responsabilités
- Audit de l’architecture DataLake en cours de développement (S3 / Delta Parquet / Postgres)
- Proposition d’une architecture corrective (plus simple et proche du modèle Lambda)
- Développement d’un projet pilote avec la nouvelle architecture
- Proposition d’une stratégie de migration (portage et/ou réécriture)
- Réorganisation de l’équipe de développement avec plus de concentration des compétences
- Design de pattern pour l’implémentation de l’API GraphQL (bréviaire de requêtes mutation et fetch)
- Portage du Datalake vers l’architecture cible.
- Formation des utilisateurs finaux (ce sont des analytics)
Suivi des développements et accompagnement de l'équipe
- Analyse des impacts des évolutions sur l'existant
- Test de Qualifications (Pré production /Production)
- Mise en pré-production.
Livrables
- Ensembles de pipeline SPARK / Notebook DATABRICKS
- Documentation complète de l’API en plus du code commenté
- Formation et montée en compétence des équipes junior client

Data Architect / Engineer

Contexte
Conception d’un Stream realtime pour alimenter un pipeline Machine Learning.
Réduire le taux de nuisance (appels qui n’aboutissent pas) et réduction des temps d’attente
Optimiser la disponibilité des téléopérateurs
Réaliser un modèle de prédiction pour piloter ASTERISK (Auto commutateur téléphonique)
Responsabilités
- Audit des sources de données (stream et batch)
- Rédaction d’une expression de besoins pour répondre à la première problématique qu’est la collecte de données asynchrones et
la construction d’un flux de données continu et qualifié.
- Design d’une stack full stream de type Kappa
- Développement d’un pilote en conditions préproduction
- Tests de fonctionnement et de qualification
- Mise en tension du flux à 150%
- Rédaction d’une expression de besoins pour répondre à la problématique d’implémentation d’une ML en stream
- Co-développement d’une ML sur notebook Databricks
- Développement d’un connecteur stream / notebook
- Rédaction de la documentation technique
- Tests fonctionnels
Livrables
- Conception et développement d’une librairie pySpark pour ASTERISK capable de dérouter les appels entrants et sortants
(streaming).
- Conception et développement du pipeline d’analyse et Data cleaning : obtention du modèle de prédiction
- Implémentation des deux libaririe dans l’environnement de production

Service Line Manager de la ligne NTIC

Description : Composée d’un ensemble de 90 Collaborateurs, incluant Chefs de projet et Directeurs de projets, ma fonction consiste à assurer une gestion de projet cohérente et performante, d’assurer les échanges avec les Front-Office (France, Belgique) Atos, de m’investir dans les opérations d’avant-ventes ainsi que de garantir une qualité dans le recrutement des ressources humaines.

Directeur de Projet

- Projet : Refonte du SI Agence
- Mission(s) et réalisations : SFG

Directeur Général de Mentra (Actionnaire de l’entreprise)

- Description : SSII spécialisée dans le domaine bancaire au départ, puis périmètre élargi à d’autres secteurs. Première entreprise au Maroc à avoir proposé des compétences dans le développement utilisant des « nouvelles technologies » (application avec client léger, la première application pour la BMCI datant de 1996 : le client Internet Explorer 3.1 était la version utilisée …). Avec un effectif de 21 (au maximum de son évolution), Mentra à compté plus de 40 entreprises clientes de renom.

Responsable développement IHM

- Description : SSII spécialisée dans le domaine bancaire, j’ai participé à un projet de recherche et développement parrainé par : IBM France, Bull, NCR, BNP, GAN pour le compte des Caisses d’Epargne. Ce projet consistait à valider la migration du moteur central d’un applicatif bancaire (celui des Caisses d’épargnes) sous système mainframe vers une plateforme Unix, Client/Serveur avec une base de donnée Terradata. Mon rôle consistait à développer les interfaces entre les applications utilisateur et le moniteur transactionnel TopEnd (NCR). Aujourd’hui Sigo Conseil à été rachetée par Viveo.