273 - Data Engineer Senior Databricks / GCP

Rôle : Data Engineer Senior Databricks / GCP

TJM : 430 € / jour

Localisation : Meudon (3 jours par semaine sur site / 2 jours de télétravail)

Date de début : ASAP

Durée de la mission : Jusqu'au 31/12/2026

Contexte de la mission

Au sein d'une équipe pluridisciplinaire (chefs de projet, architectes, DevOps, Data Engineers), vous interviendrez sur la conception et le développement de projets d'intégration de données à forte valeur ajoutée.

Vos principales responsabilités incluent :

• Développement de jobs d'intégration de données en PySpark, Spark et Python (modes streaming et batch) sur la plateforme Databricks.

• Mise en œuvre du CI/CD (GitHub, DevOps, Databricks Asset Bundles), de l’orchestration, du data management et de la sécurité.

• Optimisation des jobs existants et des ressources Cloud (GCP et Databricks).

• Mise en place de Dashboards FinOps afin de suivre et piloter l'usage des ressources GCP / Databricks.

• Participation aux astreintes et au support en production de l'application.

• Assurer une formation continue, le partage de connaissances et la rédaction de la documentation technique.

Compétences clés requises

• Databricks : Excellente maîtrise de l'administration, de la gestion des catalogues (Unity Catalog), de Delta Lake et de l'optimisation des performances.

• Technologies Data : Maîtrise approfondie de PySpark, Spark, Python, SQL et GIT.

• Cloud (GCP) : Bonne connaissance de l'écosystème Google Cloud Platform, notamment GCS, Pub/Sub, GKE et les outils d'Alerting.

Qualités professionnelles

• Esprit d’équipe, curiosité intellectuelle et envie d’évoluer dans un environnement collaboratif.

• Excellente capacité à communiquer, à vulgariser et à partager vos connaissances avec les différents membres de l'équipe.