Data Engineer Confirmé - Expert Pyspark - Services Financiers - Ile de France H/F

Votre futur environnement de travail :

Vous êtes passionné(e) par la valorisation de la donnée, rejoignez notre Data Factory localisée à Paris ! Vous y rencontrerez des experts de la mise en oeuvre de Plateforme de Données, des Data Architectes ou autres experts solution autour des problématiques de valorisation de la donnée.

Vous êtes accompagné(e) au développement de vos connaissances aux travers de différents parcours Data que ce soit pour l'ingestion, la construction de datahub, la transformation et valorisation de la donnée, la modélisation et mise à disposition.

Rejoindre notre Data Factory Sopra Steria, c'est rejoindre une communauté de Data Ingénieurs fiers de partager leur savoir et ouverts aux nouvelles expériences et expérimentations de la donnée.

Votre rôle et vos missions :

Dans le cadre de la mise en place du centre Data pour un grand acteur financier de l'état et selon votre appétence, vous participerez à plusieurs étapes de la chaîne :

- La compréhension des besoins métiers et la traduction solution de data ingénierie

- La mise en oeuvre de solution d'ingestion des données quelles soit en batch et/ou en streaming dans un contexte Cloud ;

- La structuration du DataLake, la mise en place de processus de gouvernance et sécurisation des données ;

- Le traitement de la donnée jusqu'à l'exposition au métier ;

- La mise en place de la chaine CI/CD et de sa supervision ;

- La veille technologie avec nos partenaires éditeurs et la mise en place de Prototype Design, Proof of Concept ou encore MVP dans un objectif d'idéation pour nos clients.

Vous maitrisez un langage de programmation appliqué à l'analyse de données (SQL, Scala, R, Python, Java), le traitement distribué de données (Spark, Pyspark , Hadoop) et un Framework de streaming de données (Kafka, RabbitMQ, etc.).