Taux journalier (TJM): 530€

En quelques mots

Cherry Pick est à la recherche d'un "Data Engineer" pour un client dans le secteur de la grande distribution

Description

🏢 Le Contexte : Scale-up de la Data Factory et Migration Cloud

Au sein de la Direction des SI, l’équipe DataLab est au cœur du programme de transformation technologique du Groupe. Vous intégrez la Data Factory, un dispositif stratégique réunissant les équipes Data de l'IT et des métiers pour concevoir des produits Analytics innovants (destinés aux fonctions support, logistique, magasins et consommateurs).

Face à des attentes grandissantes, la Data Factory passe aujourd'hui à l'échelle via une nouvelle organisation Agile (Domaine/Tribu/Squad). L'enjeu actuel est d'industrialiser les pratiques pour accélérer la livraison.

Dans ce cadre, vous rejoignez une squad spécifiquement responsable d'un projet d'envergure : la migration des traitements existants d'une plateforme on-premise vers une plateforme Data Cloud moderne (Azure / Databricks).

🎯 Vos Missions : Architecture, Build et Qualité

En tant que référent technique sur la migration, vous ne vous contentez pas d'exécuter : vous êtes force de proposition pour identifier les leviers d'accélération et optimiser le delivery.

1. Analyse & Migration :

• Analyser en profondeur les traitements existants sur la plateforme on-premise.

• Définir les stratégies de migration vers le Cloud et identifier les sources de données pertinentes.

2. Conception & Développement (Build) :

• Concevoir et construire des pipelines de données robustes pour transformer, enrichir et traiter la donnée au sein du Data Lake.

• Développer des notebooks Databricks pour les traitements avancés.

• Mettre en œuvre des solutions de Cloud Data Warehousing, avec un focus sur l'optimisation des traitements et le tuning de requêtes SQL.

3. DevOps, Qualité & Industrialisation :

• Livrer les développements dans un environnement DevOps (intégration des processus CI/CD).

• Concevoir et exécuter les tests unitaires.

• Réaliser des revues de code (Peer Review) pour garantir les bonnes pratiques.

• Rédiger la documentation technique (Dossiers d’Analyse Technique, Release Delivery Notes, référentiels de données).