Data ingenieur Databrick Scala F/H

Contexte

Dans le cadre du renforcement d'une équipe technique transverse intervenant sur un périmètre d'une quinzaine d'applications Data, nous recherchons 4 Data Engineers Séniors, capables d'intervenir principalement sur des activités de RUN, tout en pouvant ponctuellement contribuer aux activités BUILD.

L'objectif est de renforcer la fiabilité et l'exploitation des applications Data tout en assurant une continuité forte entre développement, mise en production et RUN.

Nous recherchons avant tout des Data Engineers expérimentés, avec une réelle culture de la production et du DevOps, et non des profils DevOps infrastructure purs.

MissionsRUN & support technique

• Analyser et résoudre les incidents de production.

• Diagnostiquer les anomalies sur les traitements, jobs et pipelines Data.

• Identifier et traiter les problèmes récurrents.

• Participer à la fiabilisation des applications et traitements Data.

DevOps & automatisation

• Améliorer les processus de déploiement et de mise en production.

• Industrialiser et automatiser les tâches d'exploitation.

• Contribuer à la fiabilisation des déploiements et traitements Data.

• Participer à l'amélioration continue des pratiques RUN/BUILD.

Supervision & monitoring

• Améliorer les mécanismes de supervision et d'alerting.

• Intégrer les dispositifs de contrôle directement dans les jobs et pipelines Data.

• Faciliter la détection, l'analyse et le diagnostic des anomalies.

Maintien en conditions opérationnelles

• Gérer les changements techniques.

• Participer à la sécurisation des environnements.

• Assurer la gestion des secrets applicatifs.

• Maintenir et améliorer la documentation d'exploitation.

Renfort BUILD

• Intervenir ponctuellement sur les développements Data Engineering.

• Apporter une expertise technique aux équipes projets.

• Contribuer aux développements et à la sécurisation des livraisons lors des pics de charge.

Profil recherché

Nous recherchons un profil :

• Data Engineer Senior, autonome techniquement.

• Ayant une expérience significative sur Databricks et Scala.

• Capable d'analyser et de modifier du code Scala dans un contexte de production.

• À l'aise avec Spark et les problématiques de traitements Data.

• Habitué aux environnements de production et aux problématiques RUN / MCO.

• Possédant une véritable sensibilité DevOps, automatisation et industrialisation.

• Capable de diagnostiquer rapidement un incident et d'en identifier la cause.

• Suffisamment polyvalent pour passer du RUN au BUILD lorsque nécessaire.

• À l'aise dans une organisation transverse impliquant plusieurs produits et applications.