Brahim - Consultant APACHE

SVP : Expert Data :

Mettre en place une data warhouse / Data Lake
- Recueille de besoins.
- Installation de Talend.
- ELK pour l'Intelligent Log Monitoring dans Talend
- Installation d’un server / postgres On-Premises.
- Installation et paramétrage de l’infra GCP en Cloud.
- Architecture de la data Warehouse /Data Mart par service.
- Développements des Jobs d’alimentations Talend (sources vers destinations).
- Développements des Rapports Tableau.
- Classements des questions par thématiques (Indexation par ElasticSearch)

Expert Talend / SAS Entreprise Guide

- Migration des scripts SAS vert Talend Big Data

: Administrateur de la plateforme Talend Big Data -

- Administrer la plateforme Talend Big Data On-premises.
- Gérer les serveurs d'installations.
- Administrer Git Lab
- Administrer Nexus
- Administrer la plateforme Control-M
- Nettoyages des serveurs Talend
- Migration de la plateforme Talend de la version 6.2 vers la 7.1 (DEV, REC et PROD)

- Développer des jobs sur Talend MDM
- Sephora : Développeur Talend Big Data - Février 2018 – Mars 2018
Une vision 360 des données clients provenant des logs de son site internet dans le but de proposer un système de recommandation basé sur les comportements des clients.
Mission :
- Installation de TalendBig Data (Partie Administration – TAC et le studio sur chaque machine de Dev)
- Développement des jobs Talend qui permettent de :
• Se connecter en FTP pour récupérer les gros fichiers.
• Déposer les fichiers dans le HDFS de Hadoop.
• Créer et alimenter des tables HIVE à partir des fichiers déposés dans le ROWDATA.
• Utiliser tSqoop pour transférer les tables CRM(Oracle) vers le HDFS.
• Faire des filtrages et de la qualité des données.
• Croiser les données en mode ELT.
• Automatiser les jobs pour consommer chaque ficher déposé en FTP.
• Récupérer les données à chaud en utilisant Kafka en créant des Topics (tKafkaCreateTopic) et des entrées/sorties (tKafkaInput,tKafkaOutput).
• Gérer le lien entre Kafka, Spark Streaming et ElasticSearch et mettre les données à disposition du Kibana et Tableau.

- Formation BIG DATA

Management de projet avec la méthode agile.
- Language Java.
- Language scala.
- Ecosystemehadoop.
- Gestion de bdd.
- Cycle de production.
- Ecosysteme spark.
- Data integration.
- Broker kafka.
- Ecosystemeelastic.
- Data visualization.
- Data management, sécurité & gouvernance de données.
- La restitution dans des projets big data.

Consultant Talend DI, ESB, MDM

Projet RCEnt (Registre cantonal des Entreprises) : Centralisation des données des entreprises de l’Etat de Vaud qui viennent des différentes ressources et les mettre à disposition pour d’autres services.
Mission :
 Développement des Jobs Talend.
 Intégration des données dans RCEnt à partir des différentesressources (fichier FOSC, REE, IDE, Web service)
 Web Services SOAP, REST, Routes avec Talend ESB
 Gérer les messages dans KAFKA.
 Administration de Talend par TAC.

Consultant Talend(TIS)

Projet : Alimentation de la data Wherehouse interne de IMAD à partir des fichiers des prestations.
Mission :
 Intégrer les fichiers journaliers des prestations dans la DWH par TIS.
 Mettre les normes de développements sur Talend
 Tests d’intégrités sur NetBeans (Java)

Consultant Talend(TOS)

Projet : Alimentation d’une Data Mangement à partir des bases internes de la BRED et mettre les données à disposition du service marketing pour des compagnes de prospections.
 Développement des Jobs d’alimentations et de la qualité de données par Talend Open Studio.
 Versionning / partage des Jobs par GITHUB
 Expertise Talend.
 Migrations Talend vers Data Stage (IBM)
 Participation à l’installation d’un cluster Hadoop (5 noeuds)

Consultant Talend(TOS)

Projet : Reprise des données entre HR et Pléiades
Mission :
 Développements des Jobs Talend pour générer des fichiers intégrables dans Pléiades (Logiciel RH de SOPRA),
 Mettre les normes de développements sur Talend
 Automatisation des scripts Talend par Shell

Consultant MDM / Big Data