Techlead Databricks (H/F)

Dans le cadre du développement et de l’évolution de sa plateforme Data, notre client recherche un Tech Lead Data Engineering disposant d’une expertise avancée sur Databricks, PySpark et Unity Catalog. Le consultant interviendra comme référent technique pour accompagner les équipes dans la conception, le développement et l’industrialisation des solutions Data.

• Piloter les choix techniques et accompagner la conception des architectures Data sur Databricks.

• Concevoir, développer et optimiser les pipelines de traitement de données avec PySpark et Spark SQL.

• Mettre en œuvre et administrer Unity Catalog pour structurer la gouvernance, la gestion des accès et la traçabilité des données.

• Garantir la qualité, la performance et la fiabilité des traitements Data, notamment sur les environnements Delta Lake.

• Encadrer techniquement les Data Engineers, réaliser les revues de code et diffuser les bonnes pratiques de développement.

• Accompagner l'industrialisation des pipelines, l'automatisation des déploiements et l'intégration des pratiques CI/CD.

Profil recherché

• Expérience confirmée en tant que Tech Lead Data Engineering ou Data Engineer Senior, avec une forte expertise Databricks.

• Excellente maîtrise de PySpark, notamment sur l'optimisation des traitements distribués et la gestion de volumes de données importants.

• Expérience concrète et approfondie sur Unity Catalog : gouvernance, permissions, catalogues, schémas et gestion des accès.

• Solides compétences en architecture Lakehouse, Delta Lake, SQL, Git et pratiques CI/CD.

• Capacité à prendre des décisions d'architecture, à challenger les choix techniques et à accompagner une équipe de développement.

• Leadership technique, autonomie, rigueur et bonnes capacités de communication.