Data Engineer Spark Senior (H/F)

Vous rejoindrez une équipe de data engineering au sein d'un acteur majeur du secteur bancaire français. Cette mission vous permettra de concevoir et d'optimiser des pipelines de données critiques sur une infrastructure moderne, en pilotant des traitements sophistiqués en Spark et en gérant des flux de données à forte volumétrie.

Intégrant une équipe agile de data engineers, vous participerez au développement, à l'optimisation et à l'industrialisation de solutions data au cœur du système d'information. L'environnement technique repose sur une stack Big Data complète (Spark, Kafka, HDFS, Cassandra), complétée par des outils cloud modernes. Vous travaillerez en cycles itératifs, en étroite collaboration avec les métiers et les équipes transversales, dans un cadre de bonnes pratiques d'ingénierie (versioning, CI/CD, monitoring).

Le projet couvre plusieurs domaines : traitements batch complexes, flux streaming en temps réel et intégrations API, avec des enjeux de performance, de scalabilité et de fiabilité en production. Vous serez amené(e) à intervenir sur l'ensemble du cycle de vie des données, de la conception à l'exploitation, en tenant un rôle de support tournant pour assurer la continuité de service.

Responsabilités :
- Développer, maintenir et optimiser des pipelines de données Spark (Scala) sur des architectures batch, streaming et API
- Concevoir et industrialiser des traitements complexes en garantissant performance, scalabilité et qualité de code
- Assurer l'intégration et la gestion de flux de données via Kafka et HDFS
- Exploiter, administrer et optimiser des bases de données NoSQL (Cassandra)
- Participer à la gestion du run en tant que support de production : monitoring, incident resolution, amélioration continue
- Escalader les anomalies critiques auprès des experts métier et des stakeholders
- Participer aux ateliers métier pour traduire les besoins en solutions techniques adaptées
- Documenter et vulgariser les travaux réalisés pour faciliter l'appropriation par l'équipe et les parties prenantes
- Mettre en œuvre les bonnes pratiques de versioning (git) et d'intégration continue

Poste à pourvoir en CDI