Data Engineer Gcp H/F

Détail du poste

Nous recherchons un Data Engineer expérimenté pour rejoindre une équipe data au sein d'un grand groupe du secteur marketing et de la transformation numérique. Vous piloterez l'architecture et l'implémentation de la plateforme PCS, en exploitant la puissance de Google Cloud Platform et les technologies de traitement en temps réel.

Vous serez en charge de concevoir et de maintenir des architectures robustes de traitement de données temps réel, en assurant la scalabilité, la fiabilité et la performance des pipelines de données. Votre expertise technique et votre capacité à guider les décisions architecturales seront essentielles pour garantir l'alignement avec les objectifs métier et les meilleures pratiques du secteur. Vous travaillerez en environnement Agile/Scrum, en collaboration étroite avec les équipes de développement et les stakeholders.

Responsabilités :
- Concevoir et implémenter des architectures de traitement temps réel utilisant Apache Beam, Spark Streaming, Flink ou technologies équivalentes
- Piloter les décisions architecturales et techniques pour la plateforme PCS
- Développer et optimiser des pipelines de données robustes sur GCP (BigQuery, Dataflow, Dataproc, Bigtable)
- Garantir la qualité, la scalabilité et la performance des solutions data
- Collaborer avec les équipes multidisciplinaires dans un environnement multiculturel
- Documenter les architectures et les décisions techniques
- Participer aux ateliers de conception et aux revues de code
- Mentorer les membres juniors de l'équipe sur les bonnes pratiques

Télétravail : 2 jours par semaine
Localisation : Valbonne

Profil :
Indispensables :
- Minimum 5 ans d'expérience en data engineering et architectures temps réel
- Expertise avérée en traitement de données temps réel (Apache Beam, Spark Streaming, Flink ou équivalent) - niveau autonome
- Expérience significative avec Google Cloud Platform et BigQuery - niveau confirmé (niveau 3)
- Maîtrise d'au moins Java ou Python - niveau autonome (niveau 3)
- Compétences en CI/CD et DevOps - niveau autonome
- Autonomie, rigueur et communication exceptionnelles
- Esprit d'équipe et capacité d'adaptation
- Proactivité et dynamisme
- À l'aise dans un environnement multiculturel
- Français : obligatoire
- Anglais : niveau B2 minimum

Fortement appréciés :
- Expérience confirmée avec Spark - niveau autonome
- Expérience confirmée avec Spark Streaming - niveau autonome
- Expérience avec Apache Beam - niveau autonome
- Expérience avec Flink - niveau autonome
- Expérience avec Kafka - niveau autonome
- Compétences en Terraform - niveau autonome
- Utilisation de Github Actions pour le déploiement - niveau autonome
- Maîtrise de GIT - niveau autonome
- Bigtable et Dataproc sur GCP - niveau autonome
- Compétences SQL génériques avancées - niveau confirmé
- Connaissance d'Agile et SCRUM - niveau basique
- Utilisation de JIRA et Confluence - niveau autonome
- Expérience avec les méthodologies Agile et outils collaboratifs