Yassine - Développeur BIG DATA

Ref : 191017K002
Photo de Yassine, Développeur BIG DATA
Compétences
Expériences professionnelles
  • REFERENCES PROJETS

    Ingénieur BIG DATA
    PROJET ODESSA: Le projet se résume à mettre en place des offres de services adaptées aux différents types
    d'utilisateurs autour d'un datalake. Chaque offre consiste à la mise en place de moyens techniques et d'un autre
    côté la fourniture de services pour utiliser ces moyens. Enfin, une gouvernance organisationnelle pour adapter
    moyens et services aux besoins.
    DOMAINE D’INTERVENTION :
    ◼ Mise en place en place des traitements pour l’ingestion des données dans un Datalake (réception,
    transformation, ingestion)
    ◼ Génération des fichiers XML à partir des fichiers csv (données brutes) en utilisant des scripts python
    ◼ Documentation des scripts (confluence, xwiki)
    ◼ Développement des scripts d'import dans des tables Hive
    ◼ Analyse des données
    ◼ Développement des plyabook ansible
    ◼ Développement des pipelines pour l’intégration continue
    ENVIRONNEMENT TECHNIQUE :
    ◼ Stack hadoop (hive, impala, hdfs, spark ), distribution Cloudera, ansible
    ◼ Progiciels: Eclipse (java), Pycharm (Python), Jira, Confluance

    ENEDIS DEPUIS NOVEMBRE 2012
    Ingénieur d’étude et développement Python/Java
    PROJET ERABLE: la finalité du projet Erable est la mise en place d’un noyau de calcul du réseau électrique plus
    homogène et mieux maîtrisé afin de suivre les évolutions réglementaires (raccordement, Décret Qualité,
    régulation incitative).
    DOMAINE D’INTERVENTION :
    ◼ Mise en place du paradigme MadReduce en Java (Loadbalancing 1 Master n Slaves) pour la
    parallélisassions des traitements
    ◼ Génération des fichiers XML à partir des fichiers csv (données brutes) en utilisant des scripts python
    ◼ Mise en place de flux Erable/SIG (système d'information géographique)
    ◼ Envois de résultats par flux ftp vers le NAS
    ◼ Réalisation des tests unitaires python
    ◼ Documentation des scripts (.doc, wiki)
    ◼ Gestion du versionning des différents programmes développés (git)
    ◼ Développement des scripts d'import dans une base de données ORACLE avec python/sqlLoader
    ◼ Participation aux développement des script métiers DPL DigSilent Programming language
    ◼ Développement des scripts python pour la supervision des traitements
    ◼ Analyse des résultats générés
    ENVIRONNEMENT TECHNIQUE:
    ◼ Paradigme MadReduce en java,
    ◼ Progiciels: Eclipse (java), Pycharm (Python),PowerFactory (DPL), Jira, Confluance

    CGI MARS 2012 - SEPTEMBRE 2012
    Ingénieur étude et développement JAVA/MYSQL
    PROJET: Développement d’un socle technique : Développement de différentes fonctionnalités du socle ayant
    vocation à être industrialisés. Ce socle sert comme générateur de code via template (optimisation du temps de
    développement).
    DOMAINE D’INTERVENTION :
    ◼ Participation aux chiffrages sur des évolutions
    ◼ Spécifications fonctionnelles et techniques des évolutions
    ◼ Tests unitaires et d'intégration avec création de scénarios (JUnit?)
    ◼ Documentation
    ◼ Injection de données au format XML
    ◼ Procédures stockées (T-SQL) et jointures multiples
    ENVIRONNEMENT TECHNIQUE:
    ◼ Java (1.7), Eclipse, Spring, Jpa, GWT, JavaScript

    LABORATOIRE D’INGENIERIE DES SYSTEMES AUTOMATISES (ISTIA) OCTOBRE 2011 - MARS 2012
    Étudiant stagiaire
    PROJET: Application de gestion d’offres de stages:
    DOMAINE D’INTERVENTION :
    ◼ Analyse des besoins: Réunions avec les différents utilisateurs du futur outil, afin d’arbitrer sur les
    fonctionnalités à prendre en compte.
    ◼ Spécification des besoins
    ◼ Définition d’un modèle en couches pour séparer les différentes parties au sein de l’application.
    ◼ Développement de différentes fonctionnalités de l’application (suppression, modification, attribution
    d’une offre de stage).
    ENVIRONNEMENT TECHNIQUE:
    ◼ Java, Eclipse, Spring, Jpa, GWT, Hibernate

Études et formations
  • COMPETENCES TECHNIQUES
    Systèmes Debian, Ubuntu, Redhat
    Langages Python, Java, Perl, Shell sh, C, C# PHP, ASP, MySQL, DPL
    Progiciels Eclipse, Visual studio .NET, Jbuilder, Matlab, EMacs, Git
    SGBDR ORACLE, SQL Server, MySQL
    Big Data Hadoop, HDFS, MapReduce, Spark, Kafka, HBase, Hive, Apache Kafka, Apache Oozie
    Langues Anglais opérationnel

    COMPETENCES FONCTIONNELLES
    Electrotechnique, Réseau Electrique Hautes et basses tensions

    FORMATION
    2012 Ingénieur en technologie de l’information
    2009 Maitrise IEEA (informatique électronique électrotechnique automatique)

D'autres freelances
Développeur BIG DATA

Ces profils pourraient vous intéresser !
CV Data Scientist Data science
Adam

Data Scientist Data science

  • MARSEILLE
Data science PYTHON PANDAS DATAVIZ BIG DATA SQL LINUX ELK C++ Cloud AWS
CV Développeur DATA
Bastien

Développeur DATA

  • AIX-EN-PROVENCE
SQL DATA BIG DATA JAVA Kubernetes Angular
Disponible
CV Data Engineer | Developpeur Big Data
Mounir

Data Engineer | Developpeur Big Data

  • CHÂTENAY-MALABRY
APACHE SPARK SQL BIG DATA APACHE HADOOP SCALA JAVA PYTHON APACHE KAFKA NoSQL Cloudera
Disponible
CV Développeur JAVA et Data
Jeremy

Développeur JAVA et Data

  • TOURS
JAVA SQL POSTGRESQL APACHE KAFKA BIG DATA
Disponible
CV Data Engineer
Moussa

Data Engineer

  • AUBERVILLIERS
PYTHON SQL CI/CD GIT BIG DATA PYSPARK AZURE DOCKER DATAWAREHOUSE SCRUM
Disponible
CV Ingénieur de développement JAVA et BIG DATA
Hakim

Ingénieur de développement JAVA et BIG DATA

  • SAINT-GERMAIN-EN-LAYE
JAVA APACHE SPARK SQL Kubernetes DOCKER SPRING BIG DATA APACHE KAFKA Microservices SCALA
Disponible
CV Consultant  Data engineer & Backend
Diakaridia

Consultant Data engineer & Backend

  • VERTOU
APACHE SPARK APACHE KAFKA BIG DATA Kotlin SCALA JAVA AGILE Spring Boot AMAZON EMR SPRING WEBFLUX
CV Data Analyst SQL
Daniella

Data Analyst SQL

  • ROSNY-SOUS-BOIS
SQL Microsoft Power BI DATA PYTHON SAS EXCEL BI BIG DATA R Qlik Sense
CV Ingénieur de développement PYTHON
Ramzi

Ingénieur de développement PYTHON

  • ISSY-LES-MOULINEAUX
PYTHON SQL BIG DATA DOCKER
CV Data Analyst, Data Engineer Google Cloud Platform
Salem

Data Analyst, Data Engineer Google Cloud Platform

  • L'HAŸ-LES-ROSES
SQL Google Cloud Platform AZURE DATAWAREHOUSE BIG DATA PYTHON