Data Engineer Python Expert / Azure Cloud - Freelance

Taux journalier (TJM): 580

Notre client dans le secteur Énergie et ressources naturelles recherche un H/F

Descriptif de la mission:

Nous recherchons un Data Engineer expérimenté pour intervenir au sein d’un grand groupe international du secteur de l’énergie.

La mission s’inscrit dans le cadre du lancement d’un nouveau projet data, avec un enjeu fort autour de la conception, du développement et de l’industrialisation de pipelines de données dans un environnement Azure Cloud.

Le consultant intégrera une squad pluridisciplinaire, dans un contexte où les pratiques data, software et ops sont fortement rapprochées. L’objectif est de limiter le silotage entre les équipes et de garantir des solutions robustes, maintenables et industrialisées.

L’environnement technique est orienté serverless, avec une forte exigence en matière de qualité logicielle : clean architecture, tests automatisés, sécurité du code, CI/CD, observabilité et couverture de tests.

Missions principales

Le consultant interviendra sur les activités suivantes :

• Concevoir et développer des pipelines de données en Python

• Implémenter des traitements batch et des orchestrations via Azure Durable Functions

• Manipuler des données volumineuses, notamment au format Parquet

• Récupérer et traiter des données depuis différentes sources : Data Lake, Blob Storage, Azure DB

• Mettre en place des validations de schémas et des contrôles qualité des données

• Assurer l’intégration avec des APIs externes

• Participer à la modélisation et à l’optimisation de bases Azure SQL

• Implémenter l’observabilité des traitements : traces, métriques, logs

• Industrialiser les déploiements via des pipelines CI/CD

• Garantir la qualité et la sécurité du code : tests automatisés, scans, coverage

• Partager les bonnes pratiques avec les autres membres de la squad

• Contribuer à la montée en compétence de l’équipe sur les sujets data engineering

Le profil doit être très solide techniquement sur Python et avoir une expérience concrète dans des environnements Azure Cloud, idéalement sur des architectures serverless avec Azure Functions / Durable Functions.

Le consultant devra être capable de concevoir des pipelines de données robustes, de manipuler des volumes importants, de structurer du code proprement et de mettre en place des pratiques d’industrialisation : tests, CI/CD, observabilité, sécurité et qualité.

Une posture senior est attendue : autonomie, rigueur, capacité à partager son travail, à documenter ses choix et à faire monter en compétence les autres membres de la squad.