Data Engineer Databricks Senior ( H/F/X)

Dans le cadre du développement de ses plateformes Data & IA, notre client recherche un Data Engineer Databricks Senior capable de concevoir, développer et industrialiser des pipelines de données à grande échelle. Le consultant interviendra sur l'ensemble du cycle de vie des projets Data, en lien avec les équipes métiers, Data Scientists, Architectes et équipes Cloud.

Missions

• Recueillir et analyser les besoins métiers.

• Concevoir des architectures Data modernes sur Databricks.

• Développer et maintenir des pipelines d'ingestion et de transformation.

• Optimiser les performances et la qualité des traitements.

• Participer à la mise en place des bonnes pratiques Data Engineering.

• Assurer les phases de tests, recette et mise en production.

• Collaborer avec les équipes Data Science, BI et Architecture.

• Contribuer aux sujets IA et valorisation des données.

• Documenter les solutions et accompagner les utilisateurs.

Compétences requisesTechniques

• Databricks (indispensable)

• Apache Spark / PySpark

• Python

• SQL avancé

• Azure Data Factory ou équivalent

• Azure Synapse / Microsoft Fabric (apprécié)

• Git

• CI/CD

• Data Lake / Lakehouse

• Modélisation de données

Fonctionnelles

• Analyse des besoins métiers

• Animation d'ateliers

• Rédaction de spécifications

• Communication avec des interlocuteurs non techniques