Data Engineer Espace de données fédéré & Data Marketplace - Banque - Freelance (H/F)

Modalités de la mission
*
Démarrage : ASAP
*
Durée : mission longue
*
Rythme : hybride 3/2
*
Lieu : Île-de-France
Contexte
Un grand groupe bancaire construit un espace de données fédéré incluant une Data Marketplace. Le Data Engineer rejoint une squad pour construire, industrialiser et intégrer les composants techniques de la plateforme aux côtés de l'éditeur retenu et des entités du groupe.
Ce que vous allez faire
*
Concevoir et industrialiser les pipelines d'ingestion, de transformation et d'exposition (qualité, performance, observabilité)
*
Mettre en œuvre les connecteurs avec les SI des entités (catalogues, référentiels, plateformes data on-prem et cloud, fédération d'identité)
*
Contribuer aux produits de données : contrats de données, métadonnées, qualité, traçabilité
*
Industrialiser CI/CD, IaC et DataOps sur les composants livrés
*
Garantir la sécurité et la traçabilité des flux (chiffrement, secrets, habilitations, RGPD, DORA, BCBS 239)
*
Accompagner les entités et documenter patterns de connecteurs et runbooks
Compétences attendues
*
Expérience confirmée en ingénierie data sur des flux distribués
*
Compréhension des contraintes d'un SI bancaire régulé
*
Collaboration en environnement multi-squads, communication claire, pédagogie
*
Orientation valeur, performance, sécurité et conformité
Compétences techniques
Impératif : Spark, Kafka, Airflow, dbt, SQL/NoSQL, formats Iceberg/Delta/Parquet, Docker, Kubernetes, CI/CD, Terraform/Ansible, AWS et on-prem
Nice to have : standards Data Spaces (Gaia-X, IDSA, EDC), data catalogues, expérience secteur bancaire