Data Engineer Senior (H/F) – Mission Data & IA

Dans le cadre d’un renfort au sein d’une équipe Data au cœur d’une plateforme Data d’envergure, nous recherchons un(e) Data Engineer Senior pour notre client leader secteur média afin de contribuer à la conception, la construction et la maintenance de pipelines de données robustes et scalables, ainsi qu’à l’industrialisation et la fiabilisation des environnements.

Au sein d’une équipe composée notamment d’un Product Owner, d’un Data Steward et de Data Engineers, vous interviendrez sur les sujets suivants :

• Participer activement aux phases de conception, planification et réalisation des tâches avec l’équipe

• Construire et maintenir des pipelines data robustes et scalables

• Accompagner l’équipe dans l’exploitation et le requêtage des données

• Organiser et structurer le stockage des données

• Mettre en place et maintenir des infrastructures scalables répondant à l’augmentation des volumes

• Construire et maintenir les workflows de CI/CD

• Partager et appliquer les bonnes pratiques avec les autres Data Engineers

• Assurer l’évolutivité, la sécurité et la stabilité des environnements

• Participer aux instances de la communauté Data Engineering

• Contribuer à la mise à jour de la documentation

• Réaliser une veille technologique active

Objectifs / périmètre

• Collecter et centraliser des sources de données non homogènes

• Assurer la conformité et la sécurité des données

• Participer aux initiatives de gouvernance des données

Environnement technique (stack)

• Langages : Python, SQL

• Traitements : Spark

• Orchestration : Airflow

• Cloud : Google Cloud Platform (GCP)

  • Services : BigQuery, Dataproc, PubSub, Cloud Storage

  • Data governance / catalog : Dataplex Universal Catalog

• Stockage : Delta Lake

• Infra as Code : Terraform, Terragrunt

• CI/CD : GitLab, GitLab CI/CD

• Méthodes : Agile (Scrum ou Kanban)