Senior Data Engineer - Expert Dataplatform Gcp H/F

Le besoin

Contexte

Mission longue (12 mois renouvelables) chez un grand acteur du secteur du retail. Présence sur site 3 jours obligatoire à Lille (Le client souhaite uniquement une personne habitant sur place).

Missions, Rôles et responsabilités

• Renforcer l'équipe Dataplatform afin d'accélérer l'industrialisation des pipelines de données et des outils d'ingestion sur Google Cloud Platform (GCP).

• Assurer la gouvernance et le contrôle de la plateforme (architecture, modèle médaillon) pour garantir cohérence, qualité et pérennité.

• Mettre en oeuvre et faire respecter les standards d'observabilité, de FinOps et de sécurité sur l'ensemble de la plateforme.

• Automatiser le provisioning et l'infrastructure via Terraform pour fiabiliser et accélérer les déploiements.

• Concevoir et industrialiser des pipelines et services data sur GCP (Cloud Run, Cloud Functions, Pub/Sub, Airflow, BigQuery, Vertex AI).

• Réduire la dette technique et améliorer en continu la maintenabilité des composants de la plateforme.

• Documenter les pratiques et animer la communauté des Data Engineers autour des standards et des bonnes pratiques.

• Contribuer à des projets IA/ML en s'appuyant sur Vertex AI.

• Travailler en présentiel 3 jours par semaine (obligatoire), avec un démarrage sur un chantier majeur prévu début 2025.

Compétences requises

• Excellente maîtrise de GCP, et capacité à concevoir et opérer des composants data à l'échelle (notamment BigQuery et les services managés associés).

• Solide expérience de Terraform pour l'Infrastructure as Code, l'automatisation du provisioning et la standardisation des déploiements.

• Maîtrise d'Airflow pour l'orchestration de pipelines, la gestion des dépendances, la planification et la supervision des traitements.

• Très bon niveau en SQL pour le traitement, la modélisation et l'optimisation des données.

• Expérience confirmée des enjeux Dataplatform (gouvernance, industrialisation, qualité et standards de plateforme).