Taux journalier (TJM): 650

Supply Zone Forecast - Data Engineer Senior

Contexte de la mission

L'équipe Supply Zone Forecast (SZF) développe et maintient les modèles de prévision de la demande et des ventes pour l'ensemble des produits Décathlon, par centres d'approvisionnement continentaux. Notre pipeline est aujourd'hui en production sur l'Europe, la Chine et l'Inde, et notre ambition 2026 est d'étendre la couverture à SEA, LATAM, NA et MEA.

Dans ce cadre, nous recherchons un Data Engineer Senior expérimenté sur PySpark et l'optimisation de pipelines à grande échelle. Au-delà des compétences techniques, nous valorisons un profil capable de structurer et prioriser les activités de Run & Stabilisation, avec une sensibilité Agile (Scrum).

Stack technique : Docker, UV/Poetry, AWS (S3, ECR), Databricks, Airflow, PySpark, Python, GitHub

Lieu : Sur site à Paris (81 rue de Clichy), Décathlon Digital

Objectifs et livrables

Objectifs

Optimisation & refonte pipeline

• Auditer et refactorer les modules de data engineering : Refining, Covariates, Modelling, Exposition

• Améliorer performances (compute, partitioning, joins, cache, skew)

• Renforcer modularité, lisibilité et évolutivité

Scalabilité & industrialisation

• Adapter la pipeline pour un déploiement mondial (multi-régions, volumétrie)

• Optimiser coûts / performance

• Structurer un framework flexible pour l'ajout de nouvelles features

Robustesse & qualité

• Renforcer tests unitaires, d'intégration et fonctionnels

• Améliorer stabilité, monitoring et bonnes pratiques CI/CD

• Réduire la dette technique (le legacy)

Collaboration

• Travail étroit avec Data Scientists et ML Engineers

• Transfert de compétences et montée en maturité engineering

• Agile skills (Scrum) appréciées pour piloter les priorités techniques et coordonner la stream

Livrables

• Plan d'optimisation priorisé avec gains mesurables

• Pipeline refactorée, plus performante et scalable

• Migration à Unity Catalog

• Tests renforcés et documentation centralisée

• Architecture prête pour extension globale worldwide

Compétences demandées

-

Programmation Python - Expert

Apache Airflow - Expert

AWS EC2 - Expert

UV/Poetry - Expert

GitHub Actions - Expert

PySpark - Expert

Docker - Expert

Databricks - Confirmé

AWS S3 - Expert

GitHub - Expert

AWS - Expert