Fiche métier Développeur Big Data : Nouveaux CV identifiés et nouvelles missions déposées

Qui sont les Développeur Big Data inscrits sur Freelance-Informatique.fr ?
+ 1 000 Développeur Big Data
freelance inscrits
34 ans Age
moyen
490€ - 630€ Tarif Journalier
Moyen
Je trouve mon freelance
Je cherche une mission

Le métier de Développeur Big Data

Le Big Data est aujourd’hui essentiel aux sociétés dans divers secteurs. Servant à la prise de décision éclairée, cette science identifie les opportunités de croissance, détecte les risques pour les anticiper, optimise les processus internes et minimise les coûts.

Le développeur big data est alors au cœur des enjeux majeurs de l’entreprise. Il code et développe des logiciels sur mesure pour collecter, traiter et analyser de gros volumes de données. Sa mission est d’exploiter les informations récoltées, selon les besoins de la structure.

Virtuose de l’informatique, cet expert doit avoir le sens de la communication et l’esprit d’analyse. Il est tenu de maîtriser divers outils techniques et faire preuve de logique.

Freelance Informatique vous propose une fiche métier détaillée pour découvrir la profession de développeur big data, ses compétences, ses fonctions et la formation à suivre. Trouvez votre professionnel en quelques clics !

Le développeur big data en bref

  • Secteur d’activité : informatique, Big data ;
  • Missions : conception et mise en place de systèmes de collecte, traitement et analyse de données au sein d’une entreprise ;
  • Compétences requises : connaissances techniques, rigueur, logique, esprit d’analyse et de synthèse ;
  • Statut : indépendant ou salarié ;
  • Niveau minimum d'accès : Bac + 3 ;
  • Outils : logiciels, langages de programmation, etc.

À retenir sur le métier de développeur big data

  • Le développeur big data conçoit des solutions de collecte, de traitement et d’analyse de grandes quantités de données ;
  • Son objectif est de rendre les données collectées accessibles aux autres services de manière fiable, rapide et efficace.

Définition du métier de développeur big data

Le développeur big data : un concepteur

Le développeur big data est un concepteur, il est également appelé ingénieur big data ou ingénieur des données.

Le développeur big data : un métier essentiel aux autres services d’une entreprise

Parmi toutes les données collectées par l’entreprise, l’ingénieur big data explore celles qui sont les plus pertinentes à utiliser. Le service marketing, par exemple, se base sur ce travail pour établir ses stratégies de communication et mener ses campagnes publicitaires.

Quelles sont les fonctions d'un développeur big data ?

Audit des besoins stratégiques de l’entreprise

L’ingénieur big data doit avoir une vision globale de l’entreprise pour développer sa solution. Il doit :

  • Identifier et comprendre les besoins et contraintes des différents services ;
  • Traduire techniquement les besoins ;
  • Réaliser une veille technologique ;
  • Assurer la protection du système d’information.

Ses interventions concernent aussi bien le développement initial d’un logiciel de collecte et de traitement de données, que l’audit d’un système existant afin de l’optimiser.

Conception et mise en œuvre de solution de gestion de données

Pour valoriser de grands volumes de données, l’ingénieur big data doit coder un logiciel sur mesure et faire émerger les indicateurs clés dont a besoin l’entreprise. Il s’occupe aussi du développement de programmes d’extraction de données, mettant ainsi en place l’architecture big data de la structure.

Ce professionnel de la data se charge d’intégrer les algorithmes aux processus internes de la société. Il classe les informations selon un cahier des charges et des objectifs définis et garantit également le respect de la réglementation RGPD (Règlement Général sur la Protection des Données).

Il teste et corrige les anomalies et éventuelles erreurs. Il doit veiller à la cohérence des résultats et assurer un suivi proactif. On lui demandera aussi de rédiger des rapports et d’expliquer ses solutions aux responsables de services.

Quels sont les outils utilisés par un développeur big data ?

Ingénieur de données est un poste technique qui requiert la connaissance de divers outils :

  • Des logiciels tels que Hadoop, Hive, Spark, Storm et Pig ;
  • Des langages de programmation comme Java, Python et Scala ;
  • Des outils de web analyse type Google Analytics ;
  • Des programmes relevant du Machine Learning et de l’Intelligence artificielle (IA) ;
  • Des outils de bases de données à l’instar de MongoDB.

Le développeur big data doit aussi maîtriser l’anglais pour assurer la veille technologique.

Quelles compétences demande le métier de développeur big data ?

Les compétences techniques

L’ingénieur de données utilise les principales technologies du Big Data. En plus des logiciels, langages et outils cités plus haut, il doit avoir une expertise en mathématiques et en statistiques. Internet ne doit avoir aucun secret pour lui !

Les compétences relationnelles

Le développeur big data collabore avec différentes équipes au sein de l’entreprise. On lui demande alors d’être :

  • Rigoureux et logique ;
  • Bien organisé et avoir un esprit d’analyse et de synthèse ;
  • Apte à travailler en équipe ;
  • Pédagogue et avoir un bon sens de la communication à l’oral et à l’écrit.

Quelle est la formation à suivre pour devenir développeur big data ?

Les ingénieurs de bases de données sont diplômés d'un Bac + 3 ou d’un Bac + 5 et certains ont obtenu un doctorat. Différentes écoles d’ingénieur, universités et IUT proposent des MSC, Master ou MBA spécialisés dans le Big Data.

Des formations continues existent pour une reconversion en développeur big data. Elles permettent de monter en compétences ou de changer de métier.

Quelle est la rémunération d'un développeur big data ?

Le salaire annuel moyen d’un développeur big data débutant est de 35 000 € à 40 000 €. Après quelques années d’expérience, il peut atteindre les 60 000 €. Cela est très variable en fonction des régions et de la taille de l’entreprise. En région parisienne, par exemple, les ingénieurs de données peuvent gagner jusqu’à 80 000 € par an.

Dans quels types d'entreprises et dans quels secteurs d'activité travaille un développeur big data ?

Le Big Data devient de plus en plus important dans tous les secteurs socio-économiques. Le choix de la structure est très large pour un ingénieur de données. Ses compétences sont très demandées dans divers domaines :

  • Le gaming ;
  • Le conseil ;
  • Les banques et assurance ;
  • Les grandes multinationales ;
  • Les centres de recherches ;
  • La logistique, et bien d’autres encore.

À quels métiers peut être comparé le développeur big data ?

L’ingénieur de données fait partie de la grande famille des métiers du Big Data dont on peut citer :

Certaines missions de ces professionnels de la Big Data peuvent être similaires. Ceux-ci peuvent aussi collaborer pour atteindre les objectifs d’une seule entreprise ou avoir des positions différentes au sein de la même hiérarchie.

FAQ

Quelles sont les perspectives d’évolution d’un développeur big data ?

Après quelques années d’expérience, l’ingénieur big data peut évoluer vers des postes impliquant plus de responsabilités. Il peut devenir directeur des systèmes d’information ou directeur des opérations.

Peut-on devenir développeur big data freelance ?

Oui, ce métier convient très bien au travail en freelance. Un développeur big data indépendant est très mobile et peut diversifier sa clientèle.

Vous êtes freelance ?
Sécurisez votre activité grâce au portage salarial !

Exemple de missions de Zakaria,
Développeur Big Data habitant les Hauts-de-Seine (92)

  • Développeur Big-Data au sein du projet MI2B (Data-Lake)

    la Société Générale.
    Jan 2022 - aujourd'hui

    Contexte : MI2B : est un Data-Lake dédié à l’analyse et la mise à disposition des données,métier De la Société Générale.
    Conception et spécification technique
    Développement
    Analyse
    Développement, correction et évolution des flux SPARK, Scala
    Mise en place de SGMonitoring (monitoring des Jobs et de l’environnement)
    Ajout et adaptation des Jobs à OOZIE

    CLOUDERA, HDFS, HIVE, HUE, SPARK, SCALA, YARN, GITHUB, JENKINS, ELASTIC-SEARCH, KIBANA, OOZIE.
  • Développeur Big-Data au sein du projet One-Data (Data-Lake)

    LOUIS VUITTON.
    Jan 2022 - Jan 2022

    Contexte : ONEDATA : est un Data-Lake dédié à l’analyse et la mise à disposition des données métier LOUIS-VUITTON.
    Conception et spécification technique
    Développement
    Analyse
    Développement, correction et évolution des flux SPARK, Scala
    Evolution et développement des webServices SCALA
    Assurer le fonctionnement de la partie RUN (Monitoring des flux)

    CLOUDERA, HDFS, HIVE, Impala, SPARK, SCALA, YARN, BitBucket, JENKINS, ELASTIC-SEARCH, KIBANA, POWERBI, AIRFLOW.
  • Développeur Big-Data au sein du projet B4ALL (Data-Lake)

    ENEDIS
    Jan 2020 - Jan 2022

    Contexte : DLK : est un Data-Lake dédié à l’analyse et la mise à disposition des données métier ENEDIS.
    Conception et spécification technique
    Développement
    Analyse
    Développement et correction des flux SPARK et SPARKSTREAMING
    Evolution des fluxs SPRINGBOOT

    Datalab ENEDIS, Hortonworks, CLOUDERA, HDFS, HIVE, HBASE, SPARK, SCALA, JAVA 8, YARN, KAFKA, GITLAB, JENKINS, KUBERNETES, SPRINGBOOT.
  • Développeur Big-Data au sein du projet VERONE (Data-Lake)

    EDF.
    Jan 2019 - Jan 2020

    Contexte : SOCLE : est un SI décisionnel dédié à l’analyse des données des clients (marché
    de masse) EDF pour les fidéliser. Ces données sont ensuite exploitées par l’entité commerce
    d’EDF.
    Conception et spécification technique
    Développement
    Analyse
    Correction et évolution des traitements Hadoop

    Datalab EDF, Hortonworks, HDFS, HIVE, HBASE, SPARK, JAVA 8, OOZIE, YARN, KAFKA, GITLAB, JENKINS, SONARQUBE, CUCUMBER.
  • Assistant à l’installation et à la mise en place d’un cluster Cloudera

    la FFF.
    Jan 2018 - Jan 2019

    Contexte : L’objectif est la mise en place d’un cluster AWS constitué de huit machines avec une préparation et une installation de la distribution CLOUDERA, ainsi que tous les outils « Hive, Impala, Zookeeper, Oozie… » et test de leurs fonctionnalités.
    Création des VMs AWS et installation du CentOS
    Préparation de l’OS pour l’installation d’Hadoop :
    o Configuration des VMs.
    o Installation de MySQL.
    o Créations des bases de données.
    Installation de Cloudera Manager « Server et agents »
    Installation de Cloudera CDH.
    Ajout et test des services « Sentry, HDFS, HBase, YARN, Spark, Sqoop, Hive, Impala,
    Flume, Hue, Oozie, Zookeeper »
    Activation de HDFS et YARN RessourceManager HA.
    Mise en place des platforme Web « Hue »

    Cluster AWS, Cloudera Manager, Cloudera CDH, Sentry, HDFS, HBase, YARN, Spark, Sqoop, Hive, Impala, Flume, Hue, Oozie, Zookeeper.
  • Jan 2018 - aujourd'hui

    Data management RH : analyse et reconnaissance des émotions en temps réel
    Durée de la mission : suspendu.
    Contexte : L’objectif est de créer à Umanis une solution de Data Science permettant de faire des analyses sur les personnes en entretien « Vidéo », Connaitre leurs émotions et envoyé un rapport d’émotions au RH.
    Développement d’une application de reconnaissance d’émotions.
    Utilisation des modèles machine learning afin d’établir l’analyse émotionnelle.
    Utilisation d’akka stream ou spark streaming pour gérer les flux et les traitements.

    Spark streaming/Scala, AKKA Stream, Machine Learning, Python.
  • Stage de fin d'études en IoT "Développement d'une blaise BLE et d'une application mobile"

    ALGORIA
    Jan 2017 - Jan 2018

    o Développement d'une balise BLE " Microcontrôleur Nordic" en temps réel
    (RTOS) en C/C++.
    o Développement d'une application mobile pour la gestion de la balise
    « Android » (JAVA & Android SDK).
    o Utilisation du langage, JAVA sous Eclipse, pour le développement de l’application.

  • Mini-projet de Master 2 au laboratoire de l’IUT de Créteil rattaché

    Université de Paris-Est Créteil en Data Science
    Jan 2016 - Jan 2017

    o Découverte et utilisation des APIs « web service de type REST ».
    o Utilisation d'une Base de données (d’image, de fichier audio et texte) pour l’évaluation des modèles Machine Learning inclus dans les APIs.
    o Récolte des résultats obtenues par les APIs en utilisant JAVA avec le test et la validation des résultats « Application des méthodes de la Data Science ».
    o Développement d'un modèle de Machine Learning (Réseau de neurones) pour fusionner et améliorer le résultat.

  • Stage de Master 1 au laboratoire du pôle universitaire Vélizy 2 rattaché

    Université de VERSAILLES Saint Quentin en Yvelines
    Jan 2016 - aujourd'hui

    o Programmation d'un algorithme statique de reconnaissance faciale avec JAVA en utilisant une Web Cam.
    o Envoie de données vers un autre microcontrôleur via câble USB

Voir le profil complet de ce freelance

Les nouveaux profils de Développeur Big Data

CV Data Engineer / Développeur Python
Marouane

Data Engineer / Développeur Python

  • PARIS
PYTHON PYSPARK APACHE SPARK Kafka APACHE KAFKA TALEND DI BIG DATA
Disponible
CV Ingénieur de développement JAVA
Mouhsin

Ingénieur de développement JAVA

  • COLOMBES
JAVA Angular SQL J2EE MYSQL SPRING JAVASCRIPT ORACLE
Bientôt disponible
CV Ingénieur de développement PHP
Jean Kesnel

Ingénieur de développement PHP

  • LA HOUSSAYE-EN-BRIE
PHP SYMFONY ANGULARJS JAVASCRIPT SQL DRUPAL ORACLE HTML5 CI/CD DOCKER
Bientôt disponible
CV Développeur fullstack Java /Angular
Eddy

Développeur fullstack Java /Angular

  • AIX-EN-PROVENCE
JAVA Spring Boot Angular POSTGRESQL REST SQL JAVASCRIPT
Disponible
CV Développeur
Baptiste

Développeur

  • PARIS
JAVA PHP JAVASCRIPT XML JSON CVS NODE.JS HTML PYTHON MONGODB
Disponible
CV Ingénieur de développement C#
Pascal

Ingénieur de développement C#

  • DURRENBACH
C# .NET JAVASCRIPT TypeScript REACT.JS
Disponible
CV Développeur WEBMETHODS
Hugo

Développeur WEBMETHODS

  • MÉRIGNIES
WEBMETHODS BAPI JAVA .NET PHP J2EE SQL SERVER MYSQL
Disponible
CV Ingénieur de développement PHP
Atef

Ingénieur de développement PHP

  • ALFORTVILLE
PHP JAVASCRIPT DRUPAL Angular SYMFONY
Disponible
CV Développeur JAVASCRIPT
Leslie

Développeur JAVASCRIPT

  • TOURCOING
JAVASCRIPT REACT.JS
Disponible
CV consultant technico-fonctionnel Oracle Ebusiness suite
Mohamed

consultant technico-fonctionnel Oracle Ebusiness suite

  • JOUY-LE-MOUTIER
SQL UNIX WINDOWS
Disponible
Je trouve mon Développeur Big Data freelance

Les nouvelles missions de Développeur Big Data

Développeur Fullstack Angular/ NodeJS

Angular NODE.JS Google Cloud Platform Cloud AWS AZURE
15/05/2024
69 - Lyon
12 mois
Voir la mission

Développeur RUBY

RUBY SHOPIFY
03/06/2024
Télétravail
7 mois
Voir la mission

Développeur WEB - CREATOR 8

29/04/2024
74 - Annecy
10 jours ouvrés
Voir la mission

Développeur BI / Décisionnel - Assurance IARD

SQL OLAP INFORMATICA SSAS Microsoft Power BI
06/05/2024
75 - PARIS
2 mois
Voir la mission

Développeur Windev

WINDEV
02/05/2024
Télétravail
5 jours ouvrés
Voir la mission

Développeur Senior EXALEAD

EXALEAD
30/05/2024
75 - Paris
3 mois
Voir la mission

Lead Dev Mobile

.NET LINUX C# JAVASCRIPT
30/05/2024
75 - Paris
3 mois
Voir la mission

Développeur Drupal

DRUPAL JAVASCRIPT AGILE
30/05/2024
69 - Lyon
3 mois
Voir la mission

Développeur PHP & Symfony Senior

PHP SYMFONY REST GIT Microservices
13/05/2024
35 - RENNES
12 mois
Voir la mission

Développeur Drupal Senior

PHP SYMFONY DRUPAL ELASTICSEARCH BDD
06/05/2024
35 - RENNES
12 mois
Voir la mission
Je trouve ma mission de Développeur Big Data freelance