Data Engineer - Freelance

Le rôle du développeur senior dans ce projet consistera à concevoir et mettre en œuvre les composants suivants de la plateforme :

• L’ingestion des données

• Le traitement et la normalisation des données

• La distribution des données aux différents acteurs

• La construction et l’amélioration d’un framework commun incluant le monitoring, la CI/CD, les tests, la performance, la résilience, les pratiques de développement et la qualité du code

Missions

• Développer et maintenir les composants de la plateforme Big Data « One Pulse »

• Garantir la conformité avec les frameworks internes et les directives d’architecture

• Collaborer avec les parties prenantes du projet afin de promouvoir les bonnes pratiques et proposer des fonctionnalités communes pour la plateforme

• Concevoir et mettre en œuvre des pipelines d’ingestion, de traitement, de normalisation et de distribution des données

• Construire et améliorer les frameworks liés au monitoring, à la CI/CD, aux tests, à la performance, à la résilience et à la qualité du code

Outils & Environnement

• Ingénierie logicielle en Python : conception, tests, processus de développement

• Architecture et technologies Big Data

• Conception, modélisation et optimisation de pipelines de données dans des environnements distribués

• Connaissance du cloud AWS : un plus, mais non indispensable