Data Platform Engineer Senior - Databricks H/F

Détail du poste

Le besoin

ontexte de la mission

Au sein de la Direction Digital & IT d'un grand groupe international du secteur de l'énergie, spécialisé notamment dans les énergies renouvelables (éolien, solaire et hydraulique), l'équipe Digital Delivery recherche un Data Platform Engineer Senior spécialisé sur Databricks.

Dans un contexte de transformation et de modernisation de son écosystème Data, l'organisation souhaite renforcer la structuration, la sécurisation et l'industrialisation de sa plateforme de données Databricks.

La mission s'articule autour de plusieurs enjeux majeurs : garantir une exploitation fiable et performante de la plateforme, déployer un cadre de gouvernance des données via Unity Catalog, accompagner la migration du Data Lake historique et favoriser l'adoption des outils et des bonnes pratiques par les équipes techniques et métiers.

Le consultant interviendra à la fois sur des activités RUN (administration, sécurité, performance, optimisation des coûts) et BUILD (migration, automatisation, gouvernance et amélioration continue), dans un environnement international.

Environnement de travail

- Localisation : La Garenne-Colombes (92)
- Rythme : Temps plein
- Date de démarrage : 02/11/2026
- Durée : Mission longue, 3 ans

Détails de la mission

Missions principales

Objectifs :

- Administrer, sécuriser et optimiser la plateforme Databricks afin d'en garantir la disponibilité, la performance et la maîtrise des coûts.
- Déployer et faire appliquer le cadre de gouvernance des données à travers Unity Catalog.
- Piloter la migration progressive du Data Lake historique vers l'architecture cible Databricks, en garantissant la continuité de service.
- Industrialiser les processus de développement et de déploiement Data à travers une approche DataOps et CI/CD.
- Accompagner les équipes techniques et métiers dans l'adoption de la plateforme et des standards de gouvernance.
- Contribuer à l'amélioration continue de l'écosystème Data et à l'intégration de nouvelles fonctionnalités.

Finalités :

- Disposer d'une plateforme Data robuste, sécurisée, gouvernée et évolutive.
- Garantir la qualité, la traçabilité et l'accessibilité des données.
- Réussir la migration de l'environnement historique sans interruption des activités métiers.
- Standardiser et automatiser les pratiques de développement et d'exploitation.
- Renforcer l'autonomie des utilisateurs et favoriser l'adoption des solutions Data.
- Assurer un équilibre entre stabilité opérationnelle, maîtrise des coûts et innovation.

Attributions

Tâches & Activités principales :

- Administrer les environnements Databricks : workspaces, compute, permissions, accès, sécurité et gestion des incidents.
- Assurer le suivi opérationnel de la plateforme, analyser les performances et optimiser les ressources ainsi que les coûts d'exploitation.
- Configurer et déployer Unity Catalog : structuration des catalogues, organisation par domaines, gestion des droits et application des standards de gouvernance.
- Définir et faire appliquer les conventions de nommage, les règles de qualité et les bonnes pratiques de gestion des données.
- Analyser l'architecture et les flux du Data Lake historique afin de définir la stratégie et le design de migration vers Databricks.
- Organiser et coordonner les différentes vagues de migration, en sécurisant les dépendances, la qualité des données et leur traçabilité (data lineage).
- Développer et industrialiser les pipelines de données avec Python et Spark.
- Mettre en place et maintenir les processus CI/CD via Git et Databricks Asset Bundles pour automatiser les déploiements entre les environnements Dev, Test et Prod.
- Accompagner les Data Engineers et les utilisateurs métiers (Data Citizens) dans leur prise en main de la plateforme.
- Animer des sessions de formation, partager les bonnes pratiques et produire des supports d'accompagnement réutilisables.
- Contribuer à l'animation de la communauté IT interne et à la diffusion des standards techniques.
- Assurer une veille sur les évolutions de Databricks, notamment les fonctionnalités liées à l'intelligence artificielle et à la GenAI.
- Participer aux rituels Agile et collaborer avec les équipes techniques, les responsables Data et les parties prenantes métiers.

Livrables attendus :

- Documentation du modèle d'exploitation et d'administration de la plateforme Databricks.
- Documentation du cadre de gouvernance Unity Catalog : organisation des catalogues, règles d'accès, standards de nommage et de qualité.
- Architecture cible et plan de migration du Data Lake historique.
- Planning de migration, suivi des vagues et tableaux de bord d'avancement.
- Pipelines CI/CD et configurations Databricks Asset Bundles industrialisés.
- Guides d'utilisation, supports de formation, documentation d'onboarding et blueprints réutilisables.
- Rapports périodiques d'exploitation : performance, disponibilité, coûts, sécurité et conformité.

Le profil recherché

Profil recherchéExpérience professionnelle :Profil Senior disposant de 5 à 10 ans d'expérience dans les environnements Data Engineering, Data Platform ou DataOps.Expérience significative dans l'administration et l'exploitation de plateformes Databricks.Expérience concrète dans le déploiement de dispositifs de gouvernance des données avec Unity Catalog.Expérience dans des projets de migration de plateformes Data ou de Data Lakes.Capacité à intervenir aussi bien sur des activités d'exploitation (RUN) que sur des projets de transformation et d'industrialisation (BUILD).Expérience dans des environnements internationaux et avec des équipes techniques et métiers pluridisciplinaires appréciée.Compétences techniques indispensables :Databricks - Expert : administration avancée de la plateforme, gestion des workspaces, compute, sécurité, permissions et optimisation des performances.Unity Catalog - Expert : gouvernance des données, gestion des catalogues, politiques d'accès, structuration par domaines et data lineage.DataOps / CI/CD : maîtrise de Git, Databricks Asset Bundles et automatisation des déploiements multi-environnements.Python / Spark : développement, maintenance et optimisation de pipelines de données.Data Engineering : conception de pipelines, modélisation, transformation et gestion des flux de données.Migration Data : conception de stratégies de migration, analyse d'existant, planification et sécurisation des bascules.Compétences complémentaires appréciées :Terraform, notamment le provider Databricks, pour l'automatisation et la gestion de l'infrastructure.Connaissance des environnements Cloud AWS et/ou Azure.Connaissance des fonctionnalités IA et GenAI de Databricks.Familiarité avec les environnements Agile (Scrum, Kanban).Sensibilité aux problématiques de FinOps, de sécurité et de conformité des données.Compétences comportementales :Excellentes capacités de communication et de vulgarisation auprès d'interlocuteurs techniques et métiers.Capacité à animer des ateliers, former et accompagner les utilisateurs.Autonomie, rigueur et sens de l'organisation.Esprit analytique et capacité à résoudre des problématiques techniques complexes.Aptitude à travailler dans un environnement international et transverse.Capacité à concilier les enjeux opérationnels, les exigences de gouvernance et les projets d'évolution.Esprit collaboratif, force de proposition et orientation amélioration continue.Langues :Français : courant / bilingue - indispensable (10/10).Anglais : avancé / professionnel - indispensable (8/10).

Mais aussi...

Taux journalier :550.css-11k7fwb{display:inline-block;white-space:nowrap;vertical-align:middle;-webkit-padding-start:var(--chakra-space-1-5);padding-inline-start:var(--chakra-space-1-5);-webkit-padding-end:var(--chakra-space-1-5);padding-inline-end:var(--chakra-space-1-5);text-transform:none;font-size:var(--chakra-fontSizes-xs);border-radius:var(--chakra-radii-md);font-weight:var(--chakra-fontWeights-semibold);background:var(--chakra-colors-success-200);color:var(--chakra-colors-success-700);box-shadow:var(--badge-shadow);padding:4px 6px;--badge-bg:var(--chakra-colors-success-100);--badge-color:colors.success.800;}.chakra-ui-dark .css-11k7fwb:not([data-theme]),[data-theme=dark] .css-11k7fwb:not([data-theme]),.css-11k7fwb[data-theme=dark]{--badge-bg:rgba(226, 243, 232, 0.16);--badge-color:var(--chakra-colors-success-200);}Cette offre est à 0% de commission .css-74lrwu{width:1em;height:1em;line-height:1em;-webkit-flex-shrink:0;-ms-flex-negative:0;flex-shrink:0;color:currentColor;font-size:16px;display:-webkit-box;display:-webkit-flex;display:-ms-flexbox;display:flex;-webkit-transition:.1s ease-in-out color;transition:.1s ease-in-out color;}.css-74lrwu *{-webkit-transition:.1s ease-in-out fill;transition:.1s ease-in-out fill;fill:var(--chakra-colors-rythm-600);}