Data Engineer Databricks

Vous intégrerez une équipe, responsable de la migration de traitements existants depuis une plateforme on premise vers une plateforme Data Cloud basée sur Azure et Databricks. Dans ce contexte, vous interviendrez sur la conception et la structuration des traitements data.

Votre rôle

Conception et développement de solutions data

·        Concevoir les architectures techniques nécessaires pour la valorisation des données

·        Concevoir les solutions permettant le traitement des données

·        Réaliser les croisements de données nécessaires ainsi que les opérations de validation, correction et contrôle qualité

·        Apporter une expertise technique pour développer les solutions data appropriées aux différents cas d'usage

Gouvernance et gestion de la donnée

·        Structurer les données en intégrant les enjeux de cycle de vie

·        Identifier et qualifier les sources de données pertinentes

·        Garantir la cohérence et la qualité de l'intégration des données

·        Veiller au respect des exigences de traitement et de sécurité sur les données

·        Suivre et référencer l’usage des données

Documentation et collaboration

·        Documenter et maintenir à jour les référentiels et catalogues de données

·        Travailler en collaboration avec les Architectes d'Entreprise Data