Lead Tech - Spark/Java/Databricks (Lyon)

Hello,

Pour le compte de l'un de mes clients Lyonnais dans le secteur de l'énergie, je suis à la recherche d'un tech lead Spark/Java/Databricks.

Description du profil :

Les missions s’inscrivent dans une trajectoire progressive :

Phase 1 : Modernisation des traitements existants

• Migration de traitements Informatica et PL/SQL vers Spark (Java)
• Participation à l’optimisation des traitements existants
• Maintenance corrective et évolutive des traitements PL/SQL
• Appropriation des processus métier derrière les flux de données

Phase 2 : Refonte cloud (Databricks)

• Participation au projet stratégique de migration vers le cloud
• Conception et mise en œuvre de pipelines de données sur Databricks
• Industrialisation des traitements dans un environnement moderne

En parallèle des missions de développeur big data, le tech lead aura en charge la définition de la trajectoire technique de l’équipe Spark, l’animation et la montée en compétence des développeurs big data.

Activité :

• Concevoir, développer et maintenir des pipelines de données en Spark (Java)
• Migrer des traitements legacy vers des architectures Big Data modernes
• Assurer la maintenance des traitements existants SQL / PL-SQL
• Garantir la performance, la robustesse et la qualité des données
• Participer activement au RUN et à l’amélioration continue
• Evolutions et MCO du socle technique
• Définir les besoins sur l'outillage (workflow de dev, CI/CD) et participer aux évolutions en collaboration avec l’équipe DevOps
• Définir les évolutions nécessaires sur le socle technique
• Accompagner les DE dans la prise en main et la maitrise de la stack de développement (socle, spark, delta, databriks)
• Assurer la cohérence globale du code produit par l’équipe.
• Assurer la vision long terme et l’alignement des développements avec les objectifs métiers et techniques.

Profil recherché

Au moins 6 années d'expérience sur le rôle

Impératifs :

Spark, Java & Databricks

Compétences attendues sur le profil :

Dans ce contexte, nous recherchons un Tech Lead ayant une forte appétence pour :
• La compréhension des enjeux métier liés à la donnée
• Les environnements Big Data en transformation
• Le travail sur des systèmes existants et l’amélioration continue
Le profil attendu combine compétences techniques solides et posture d’ingénieur impliqué dans le fonctionnement global du SI (BUILD & RUN).

Compétences techniques requises
• Maitrise en Spark (indispensable)
• Maitrise en Java (indispensable)
• Connaissance en Databricks (indispensable)

Compétences appréciées
• Connaissances en SQL / PL - SQL
• Python