Khaled - Développeur TALEND

Expérience professionnelle

Client : GEO.3L GROUPE Depuis Mars 2020
Consultant Talend - Responsable flux de données

Projet : Intégration des données sur Salesforce
Les tâches réalisées :

● Participer à la définition et au cadrage des besoins fonctionnels
● Coordination fonctionnelle et technique avec les différentes équipes technique de nos partenaires (SFR, ENI, Bouygues Telecom, Vattenfall...)
● Développement des jobs Talend qui permettent d’automatiser la récupération les fichiers de suivi de ventes des différents partenaires
● Modélisation et création d’un Data Warehouse en étoile qui va stocker les données des ventes
● Développement des jobs Talend qui permettent de stocker les données depuis les fichiers sur le Data Warehouse
● Développement de jobs Talend qui permet d’envoyer les données depuis le Data Warehouse vers l’objet Odoo concerné
● Automatisation de la récupération de Data depuis différentes Data Sources (FTP, API, Google Sheet) et des différents data types (XML, Json, CSV..) avec des jobs Talend for data integration
● Conception et création d’un Data Warehouse pour stocker les Datas Collectées
● Conception et développement des différents jobs Talend qui permet de transformer, nettoyer et charger la data sur les objets Salesforce
● Conception et développement des jobs Talend permettant l’exécution des backups des objets Salesforce sur les différents environnements de backup du groupe
● Implémenter les tests unitaires et d’intégration sur l’environnement test de Salesforce (UAT)
● Rédiger la documentation technique liée au projet.
● M’assurer de la qualité des livrables et le suivi des livraisons des travaux réalisés.
● Développement des job Talend for Data Quality qui surveillent la qualité de données en production
● Administrateur Salesforce (Gestion des utilisateurs, Rôles, Accès, Création des triggers, Création des templates des emails HTML, Paramétrages, Création des champs et objets CUSTOM)
● Traduire les besoins fonctionnels techniquement aux développeurs Odoo
● Administrateur du CRM Odoo (Gestion d’accès, Utilisateurs, Trigger)
● Développement des Dashboards pour les différents services du groupe
● Développement des des jobs Talend qui permettent d’alimenter les objets Odoo par le flux de données.
● Développement de API REST
● TEST unitaire
● Documentation technique

Environnement Technique : FileZilla, XML, API REST, Talend ETL,ESB, Salesforce, Postgresql, SQL, Talend for Data Quality, Google Sheet, PHP, Rest web service,Talend,Odoo

Client : SoftSys Mars 2020 - Juillet 2020
Consultant QA

Projet : Test, Paramétrage et Déploiement des solutions chez les clients

Les tâches réalisées :

● Pilotage des projets clients.
● Animation des réunion avec le métiers
● Cadrage des besoins
● Rédaction des spécifications Fonctionnelles
● Tester fonctionnellement et techniquement les développements de la solution ERP.
● Déploiement et paramétrage des modules de l’ERP chez les clients
● Suivi lors de la mise en exploitation de la solution auprès des clients

Environnement technique: Medsys ERP, SQL, Microsoft SQL Server

Client : QWEEBY SAS Janvier 2019 - Mars 2020
Développeur Talend

Projet : Développement des Tableaux de bord pour les différents départements

Les tâches réalisées :

● Pilote des réunions de spécifications de besoins avec les clients internes
● Préparation de la Data avec des jobs Talend et la charger sur des différents outputs
● Développement des Tableaux de bord avec Power BI
● Développement des Flux ETL Talend
● Développement des Flux ESB
● Test Unitaire
● Documentation technique

Environnement technique: Talend for Data Integration, SQL, MySQL, Java

SUEZ Depuis Février 2018
Consultant Développement Informatica
Projet : Export des données depuis la base Oracle Simpac et leur traitement et la génération des fichiers sous format Csv qu’ont été envoyé au serveur d’change FTP pour l’alimentation de MDM
Tâches :
• Analyser et comprendre les besoins fonctionnels à partir des réunions avec les équipes concernés.
• Conception de structure des fichiers générés par le workflow Informatica
• Ecriture des requêtes SQL en utilisant les indexes et les filtres pour avoir un temps de réponse minimal
• Développement d’un mapping avec Powercenter Informatica modélisant les règles de mapping nécessaires pour l’import des données depuis la Base Source.
• Développement des méthodes java utilisé dans le mapping.
• Création d’un Workflow pour l’import des données depuis la base source et leur traitement et pour la génération des fichiers demandés.
• Développement des scripts batch pour la sauvegarde et l’upload des fichiers générés dans le serveur distant
• Mise en production de workflow Informatica
Environnement Technologique : Informatica PowerCenter (v.9), Oracle (12c), windows 10

Ooredoo Mars 2014 - Février 2018
Expert SI Business Intelligence et Revenue Assurance

Projet 07 : Développement d’un job Talend pour la correction et la mise à jour des tables d’audits et l’identification et la récupération de traitement des fichiers de différentes sources de réseau Ooredoo dont leur traitement est Failed.
Tâches :
• Analyser les besoins fonctionnels avec le client.
• Rédiger les documents de spécification fonctionnelle et technique.
• Conception et création des tables de dimension et de log utilisées durant le processus de récupération.
• Développer un job Talend pour connecter à la base oracle pour exporter les données nécessaires pour l’identification des fichiers manquants ou dont leur traitement était erroné en utilisant les différents composants Talend de business intelligence.
• Correction des tables d’audits en utilisant les composants talend d’orchestration, internet et Oracle
• Réaliser les tests unitaires et les analyses approfondies afin de garantir la fiabilité et l’intégrité des données.
• Développement des scripts shell (Redhat5) qui se connectent a la base pour lancement des procédures de traitement des données et la génération des alertes et des rapports et l’envoi de ses alertes par mail aux concernés.
• Automatisation des traitements en utilisant le Cron Linux et mise en production du processus de récupération des fichiers.
• Ecriture des requêtes SQL pour la mise à jour des tables d’audit.
• Développement des méthodes java utilisé dans les mapping Talend.
• Support et maintenance de l’environnement de production.
Environnement Technologique : Talend (v.6), PL\SQL (oracle12c), Red Hat Linux Shell, java (v.5)
Projet 06 : Développement d’un job Talend pour le Traitement et chargement des données liées aux points de fidélités affectés aux abonnées Ooredoo et développement des rapports de suivi avec Qlikview.
Tâches :
• Analyser les besoins fonctionnels avec le client (identification des KPI et les rapports demandés).
• Rédiger les documents de spécification fonctionnelle et technique.
• Conception et création des tables dans la base ainsi que leur partitionnement et le choix des indexes et leur types.
• Développer un job Talend pour connecter à la base source pour exporter les données, les traiter en utilisant les différents composants Talend de business intelligence et les charger dans la base destination.
• Développer les procédures PL/SQL pour la génération des rapports de réconciliation en utilisant les curseurs et les indexes pour un scenario d’exécution avec temps de réponse optimal.
• Création d’un package PL/SQL pour le calcul de la balance de points de fidélité.
• Réaliser les tests unitaires et les analyses approfondies afin de garantir la fiabilité et l’intégrité des données.
• Développement des scripts shell (Redhat5) qui se connectent a la base pour lancement des procédures de traitement des données et la génération des alertes et des rapports et l’envoi de ses fichiers par mail aux concernés.
• Automatisation des traitements en utilisant le Cron Linux et mise en production du processus de traitement des données.
• Ecriture des requêtes SQL pour le chargement des données agrégées utilisés dans les Dashboard Qlikview
• Développement des tableaux de bord en utilisant les objets et les fonctionnalités de Qlikview (v.11) tels que liste de sélection, liste multiple, zone table, les graphiques (courbe, Radar, histogramme, secteur,..)
• Faire le désigne des Dashboard et organisation des graphes dans les feuilles Qlikview.
• Restriction de l'utilisation des fonctionnalités de QlikView (Objet, feuille, document) sur les utilisateurs concernés
• Gestion des droits d’accès des utilisateurs concernés sur Qlikview.
• Support et maintenance de l’environnement de production.
Environnement Technologique : Talend (v.6), PL\SQL (oracle12c), Red Hat Linux Shell, java (v.5), Qlikview (v.11)

Projet 05 : Traitement et chargement des fichiers générés par nos fournisseurs de sondage appliqué sur les abonnés Ooredoo et génération des rapports demandés par les clients.
Tâches :
• Identification de besoins tels que les données demandés et leurs formats à partir des réunions avec le client.
• Rédiger les documents de spécification fonctionnelle et technique.
• Conception de modèle des données dans le Data Warehouse tels que la structure des tables et les indexes et leur partitionnement.
• Développement des scripts Shell utilisé pour l’import, le backup et la gestion des erreurs des fichiers de données.
• Création d’un mapping avec Power Center designer en utilisant les transformations d’informatica (v.10) tels que expression transformation, filter transformation et agrégateur transformation pour le développement des traitements demandés
• Création d’un workflow avec workflow Manager en utilisant le mapping développé pour le traitement et chargement des données avec l’ETL Informatica
• Exécution des scénarios de test et analyse de premier niveau
• Génération d’un fichier XML pour la mise en production de workflow après la validation des tests
• Développement des rapports selon le besoin de client.
Environement Technologique : Informatica (v.10), GreenPlum, Linux Red Hat 5, Shell
Projet 04 : Développement d’un job Talend pour le traitement des fichiers de détection des fraudes générés par le fournisseur et la vérification et la suspension des abonnées frauduleux.
Tâches :
• Analyser les besoins fonctionnels avec le client.
• Rédiger les documents de spécification fonctionnelle et technique.
• Conception de modèle des données dans le Data Warehouse tels que la structure des tables et les indexes et leur partitionnement.
• Développement des routines java utilisé dans le mapping
• Développement de job Talend pour l’import des données en utilisant les composants de connexion FTP vers le serveur distants (tconnexionFtp, tgetFtp, tdeleteftp,..)
• Traitement des fichiers importés en utilisant les composants (Tfilter, Tmap, taggregater,…) et en utilisant les triggers Talend.
• Enrichissement et le chargement des données dans la base destination.
• Création des trigger PL/SQL pour la suspension des abonnés frauduleux avec appels aux web services de suspension.
• Développement des procédures PL/SQL pour la vérification des abonnées frauduleux.
• création des scripts Shell pour la génération des rapports el leur envoie par mail aux concernés.
• Mise en production de la solution développée après la validation des tests unitaires
• Contrôle des flux de chargements journaliers.
Environnement Technologique : Talend (v.6), PL\SQL (oracle12c), Linux Red Hat5, shell, java(5)

Projet 03: Développement d’un job Connectiva pour le traitement et chargement des fichiers liées au service portabilité entre les 3 opérateurs de télécommunication (Ooredoo, Tunisie Télécom et Orange).
Tâches :
• Analyse des besoins et rédaction du fichier Spécifications techniques détaillées.
• Conception de modèle des données dans la base.
• Création des tables dans la base ainsi que leur partitionnement et leurs indexes.
• Développement d’un décodeur java pour le décodage des fichiers de portabilités
• Développement d’un job Connectiva pour le traitement données en utilisant les fonctions de mapping Connectiva (v5.4) et leur chargement dans la base destination Oracle 12c.
• Développement des procédures PL/SQL en utilisant les fonctions analytiques et les curseurs pour l’enrichissement des sources de données existantes.
• Développement des tableaux de bord en utilisant les objets et les fonctionnalités de Qlikview (v.11) tels que liste de sélection, liste multiple ,les tableaux dynamiques , les graphiques(jauge, Nuage de point, histogramme, secteur, combiné..)
• Faire le désigne des Dashboard et organisation des graphes dans les feuilles Qlikview.
• Restriction de l'utilisation des fonctionnalités de QlikView (Objet, feuille, document) sur les utilisateurs concernés
• Gestion des droits d’accès des utilisateurs concernés sur Qlikview.
• Participer au test des rapports.
Environnement Technologique : Connectiva ETL Designer (v.5.4), Qlikview (v.11), PL\SQL (Oracle 12c), Linux RedHat 5, shell
Projet 02: Evolution et maintenance de la plateforme Fraude et Revenue Assurance (RA).
Tâches :
• Rédaction des spécifications fonctionnelles et techniques Fraudes & Revenue Assurance.
• Développement, test et validation du processus d'intégration à partir du réseau et du BSCS.
• Développement, test et validation du tableau de bord RA avec QLikview.
• Mise à jour des procédures PL / SQL afin d’assurer un temps de réponse minimal en utilisant des indexes et des curseurs.
• Développement des jar java pour assurer la mise à jour des décodeurs et des adaptateurs Connectiva.
• Développement et validation des rapports de suivi RA.
• Support et maintenance des ETLS Connectiva.
• Assurer les modifications avec la migration des sources DB / ASN.1 / Text telles que IN, MSS, BSCS, HLR, GGSN, SGSN, ERP, TAP ...
Environnement Technologique : Talend (v.6), Oracle12c, QlickView (v11), Linux Redhat5, Shell, Java(5), network source files
Projet 01 : Conception et développement d’une application de gestion des ressources hardware et software des serveurs STP (Signaling Transefr Point).
Tâches :
• Analyse des besoins et Rédaction du fichier Spécifications techniques détaillées
• Conception et création des tables de la base des données.
• Extraction des données de performance hardware et software (essentiellement les statistiques du trafic de signalisation) depuis le serveur en utilisant le protocole SFTP.
• Développement un décodeur java pour le décodage des fichiers exporté depuis le serveur FTP.
• Traitement des fichiers et chargement des données dans la base destination Mysql.
• Développement des beans Java pour les traitements et les fonctionnalités demandés.
• Connexion à la base de données en utilisant le Framework Hibernate
• Générer un graphe modélisant la structure HW des STP selon les données extraites et les règles d’ingénierie du nœud.
• Générer un DND par nœud (DND : Detailed Node Design) : une référence qui consolide les résultats.
• Générer une vue graphique modélisant l’architecture du réseau de signalisation connecté aux STP.
• Désigne des interfaces graphiques pour la saisie des données liée aux tables de dimension avec le framework Primefaces.
• Développement d’un module pour la gestion des droits d’accès.
• Export des rapports en format Excel, csv
Environnement Technologique : java(5), Linux Redhat 5, Shell, JavaScript, Prime faces (6.0), HTML5 ,CSS3, JavaEE, Mysql.