Architecte BI

Ref : 210325B004
Logo client
Compétences requises
HDFS APACHE KAFKA APACHE SPARK SCALA DOCKER Anglais
Description de la mission
Nous recherchons un architecte BI pour un de nos clients grands comptes sur Charenton le Pont.

Description du besoin :
Récupérer les données issues de sources externes
• Utiliser la puissance du Datalake
• Produire et mettre à disposition automatiquement des agrégats journaliers, hebdomadaires et mensuels.

Mise en œuvre de la chaîne :
o d’ingestion de données,
o de validation de données,
o de croisement de données,
o de déversement dans le datalake des données enrichies

• Développer dans le respect des règles d’architecture définies
• Développer et documenter les user stories avec l’assistance du Product Owner.
• Produire les scripts de déploiement
• Prioriser les corrections des anomalies
• Assister les équipes d’exploitation
• Participer à la mise en œuvre de la chaîne de delivery continue
• Automatiser les tests fonctionnels
Aspects Humains :
• Grande capacité à travailler dans une équipe, en mode Scrum / Kanban.
• Bonnes compétences relationnelles et grand sens de la communication (capacité à entrer dans le détail).
• Sensible et informé des évolutions technologiques sur les piles logicielles pratiquées.

Connaissances techniques :
• Stockage : HDFS / GCS
• Traitement: Maitrise de l’écosystème Spark / Kafka / Scala
• Planification : Airflow / Composer
• Gouvernance : Apache Atlas / Hive
• Méthodologies : Scrum, Kanban, Git
• DWH : SQL, Oracle / BigQuery
• Delivery : Git, Ansible, Docker, Terraform, Jenkins / Cloud Build
• La connaissance de la plateforme Data GCP est un plus
• La connaissance de la plateforme Amadea/Statmining est un plus

Contexte de la mission :
le client est en charge de déclaratifs règlementaires pour le compte de l'ensemble du groupe. Le cahier des charges de ces statistiques évolue en 2021.
Le client a lancé un projet de construction de son nouveau socle Data. Un chantier de collecte et de refactoring des alimentations et des transformations de données est à réaliser au sein de l’équipe afin de répondre à ces nouvelles spécifications dans la nouvelle architecture.

Description :
• Définir et maintenir l’architecture technique (référentiel) de tout ou partie du système d’information en veillant à la cohésion entre les aspects matériels, applicatifs, systèmes d'exploitation, réseaux…
• Garantir la cohérence, la pérennité et analyse les impacts techniques des nouvelles solutions et leur cohérence avec l'architecture existante
• Etablir des préconisations pour tout nouveau projet ou nouvelle technologie et conseille l'urbaniste sur l'utilisation et les implémentations possibles des outils
• Communiquer l'architecture auprès des équipes projet (conception, développement, intégration, tests...)
• Organiser les choix de veille technologique
• Garantir les bonnes performances de l'architecture, de la stabilité, d'évolution, et des délais de réponse des services
• Définir l’architecture technique du ou des systèmes d’information
• Vérifier et analyser les impacts techniques des nouvelles solutions et leur cohérence avec l'architecture existante
• Définition et gestion du référentiel du système informatique sur les plans : outils, procédures, normes, vocabulaire, sécurité…
• Définition et gestion des standards techniques
• Pour tout nouveau projet ou toute nouvelle technologie, participer à l’étude d’impact sur l’architecture existante ou prévisionnelle
• Préconiser des choix techniques en vue d’assurer la cohérence de cette évolution
• Conseiller l'urbaniste sur l’utilisation et les implémentations possibles des outils informatiques et de télécommunications
• Organiser les choix de veille technologique
• Travailler en équipe avec l'Urbaniste des SI
• Promouvoir l’architecture technique auprès des informaticiens

D'autres offres
Architecte HDFS

Ces missions pourraient vous intéresser !

Architecte Data

HDFS APACHE SPARK APACHE KAFKA SCALA ORACLE
ASAP
75 - Paris
3 mois
Voir la mission

Architecte technique / DATA

HDFS APACHE SPARK SCALA APACHE KAFKA GIT
ASAP
94 - Charenton-le-pont
5 mois
Voir la mission

Développeur Java /Spark

JAVA HDFS PYSPARK Kafka
29/04/2024
44 - NANTES
12 mois
Voir la mission

Expert BIGDATA : OnPrem & AZUR

PYTHON ANSIBLE Kubernetes APACHE HIVE HDFS
ASAP
puteaux
6 mois
Voir la mission

Consultant DATA

HDFS APACHE SPARK APACHE KAFKA SCALA GIT
ASAP
94 - Charenton-le-pont
6 mois
Voir la mission

Data Engineer

PYTHON SCALA HDFS Kubernetes
ASAP
92130 - Issy-les-Moulineaux
6 mois
Voir la mission

Data ingénieur

APACHE HADOOP APACHE HBASE HDFS APACHE SPARK APACHE KAFKA
ASAP
grand duché du luxembourg
12 mois
Voir la mission

Consultant Big Data

APACHE SPARK APACHE HIVE PYTHON HDFS
ASAP
31 - Toulouse
3 mois
Voir la mission

Data Engineer expérimenté

HDFS APACHE SPARK
ASAP
94 - Charenton-le-pont
3 mois
Voir la mission

Consultant SPARK RDD SPARK SQL

APACHE HADOOP APACHE SPARK JAVA SCALA HDFS
ASAP
75 Paris
3 mois
Voir la mission