Senior Data Engineer Azure / Microsoft Fabric – AI-native (pré-embauche) - CDI

Contexte et enjeux

• Notre client, un acteur de la donnée du secteur maritime, recherche un(e) Senior Data Engineer en pré-embauche pour renforcer l’équipe Data de sa Direction des Opérations. Le rôle est très technique, orienté engineering, industrialisation et exploitation, avec une attente forte : être moteur sur les chantiers en cours.

• Sa plateforme data alimente les tableaux de bord du portail client, les API et les flux de données de ses clients (affréteurs et armateurs). Microsoft Fabric a été retenu comme socle de la plateforme et du nouveau produit, y compris pour des agents IA. Les chantiers visent à :

• Sécuriser les données par client, avec une isolation homogène de l’entrepôt aux API, issue d’une source de droits unique et testée en CI

• Fiabiliser la donnée : sources approuvées, transformations versionnées, testées et auditables de bout en bout

• Préparer l’IA : métadonnées obligatoires sur chaque modèle et exposition des données aux agents (API, MCP)

• Réduire de moitié le coût de la plateforme, en décommissionnant les briques en fin de vie et en stockant les données en formats ouverts (Delta)

• La migration se fait par vagues, sans rupture de service : les technologies historiques (SSIS, Analysis Services, SQL Managed Instance, ADF, couche ODS) restent en production au moins jusqu’à fin 2027.

• En parallèle, l’équipe adopte une approche Spec-Driven Development assistée par l’IA avec Claude Code, inspirée du guide du SDLC fondé sur l’IA d’Anthropic : artefacts versionnés (intention, spécification, plan), CLAUDE.md, skills, hooks, sous-agents, CI comme premier relecteur et validation humaine avant la production. Une plateforme de développement agentique arrivera prochainement.

Responsabilités

• Développer les modèles dbt de l’architecture médaillon sur Fabric (Bronze → Silver → Gold, schémas en étoile), avec tests, documentation et métadonnées

• Migrer la logique SSIS et legacy vers dbt, avec tests de parité avant chaque décommissionnement

• Concevoir des pipelines d’ingestion fiables et supervisés (API, flux fournisseurs, bases applicatives, fichiers, données IoT et séries temporelles) avec ADF, Azure Functions et le mirroring Fabric

• Mettre en œuvre l’isolation par client (RLS), les tests de données bloquants et la protection des données personnelles

• Industrialiser : CI/CD Azure DevOps, Infrastructure as Code (Terraform), modèles sémantiques Power BI versionnés (TMDL), bonnes pratiques FinOps

• Contribuer aux fonctionnalités IA du nouveau produit : exposition des données aux agents, assistants en langage naturel

• Assurer le maintien en conditions opérationnelles du legacy jusqu’à son décommissionnement, ainsi que le support de niveau 2/3

• Être moteur dans l’adoption du SDD avec Claude Code : écrire et faire vivre CLAUDE.md, skills, hooks et sous-agents, contribuer au déploiement de la plateforme agentique et accompagner l’équipe

Organisation de la mission

• Mission en pré-embauche, avec un objectif d’intégration en CDI à son issue. Démarrage début janvier 2027.

• L’intervention sera sur site (Marseille), avec possibilité de 2 jours de télétravail après une période d’intégration, pour maximiser le transfert de connaissance en présentiel.