Data Engineer - Freelance

Taux journalier (TJM): 450 - 480

Dans le cadre du déploiement d'une plateforme Data destinée à centraliser, fiabiliser et gouverner les données des domaines banque et assurance, vous intégrerez une squad Data Flux composée de développeurs Data, d'un architecte technique, d'un Business Analyst et d'un Product Owner, sur les missions suivantes :

• Concevoir et développer des pipelines de données robustes et évolutifs, selon une architecture en couches Bronze / Silver / Gold

• Implémenter et paramétrer des workflows Apache NiFi pour l'ingestion, la collecte et la normalisation des données issues de sources multiples (fichiers XML/CSV, API REST)

• Participer à la modélisation du socle de données structurées et au développement des transformations permettant de constituer les vues consolidées du MDM

• Mettre en place des mécanismes d'audit, de logs et de contrôle qualité : complétude, unicité, cohérence et versioning des données

• Surveiller les performances des pipelines, identifier les goulots d'étranglement et proposer des améliorations continues

• Veiller à la sécurité des données : authentification, chiffrement, gestion des accès, conformité aux standards du groupe

• Documenter les processus, schémas de données et bonnes pratiques afin d'assurer la maintenabilité et le partage des connaissances au sein de la squad