Data engineer Senior - AWS Spark Python - Freelance

Taux journalier (TJM): à définir

Contexte

Dans le cadre du développement de sa stratégie Data, notre client recherche un(e) Data Engineer Senior pour accompagner son pôle Data Services dans la conception, l’industrialisation et l’évolution de ses solutions data.

Missions principales

• Concevoir et optimiser des pipelines de données à grande échelle (batch, streaming, API)

• Structurer les données selon un modèle Médaillon (Bronze / Silver / Gold)

• Développer et industrialiser les transformations (DBT, Spark, Iceberg)

• Déployer et maintenir les traitements dans un environnement cloud (AWS)

• Orchestrer les workflows (Airflow) et mettre en œuvre l’Infrastructure as Code (Terraform)

• Garantir la qualité, la performance et la fiabilité des flux de données

• Contribuer à l’évolution de l’architecture Lakehouse

• Participer à la gestion des incidents et à l’amélioration continue

Profil recherché

• 8 ans minimum d’expérience en Data Engineering

• Solide expertise Big Data / Lakehouse

• Maîtrise de Spark, DBT, Iceberg, AWS et Terraform