Data Engineer Big Data - CDI

Contexte

Dans le cadre du renforcement d'une plateforme de données à forte volumétrie, nous recherchons un Data Engineer confirmé pour intervenir sur des sujets de développement, d'industrialisation et de maintien en conditions opérationnelles.

Vous rejoindrez une équipe technique en charge de la collecte, du traitement et de la mise à disposition de données critiques au sein d'un environnement exigeant.

Missions

• Concevoir et développer des pipelines de traitement de données
• Industrialiser les flux d'alimentation et de transformation
• Optimiser les performances des traitements batch et/ou temps réel
• Participer aux évolutions et migrations de la plateforme Data
• Assurer la qualité, la fiabilité et la sécurité des traitements
• Réaliser des analyses techniques, investigations et résolutions d'incidents complexes
• Mettre en place les bonnes pratiques de développement et d'exploitation
• Produire la documentation technique associée
• Collaborer avec les différentes parties prenantes du projet

Environnement technique

Data & Big Data

• Cloudera Data Platform (CDP)
• Hadoop
• HDFS
• HBase
• Spark
• Hive
• Impala

Data Integration & Streaming

• Kafka
• NiFi
• Sqoop

Orchestration

• Airflow
• Oozie

Développement

• Python
• Scala
• SQL
• Shell

Gouvernance & Sécurité

• Ranger
• Atlas
• Kerberos

DevOps

• Git
• Jenkins ou GitLab CI
• Docker

Modalités

• Localisation : France
• Mode de travail : Hybride
• Démarrage : Été 2026
• Durée : Mission longue
• Français courant requis
• Formation supérieure en informatique ou équivalent