Data Engineer

Contexte
Nous recherchons un consultant freelance pour une mission en tant que Data Engineer dans le secteur du bâtiment et de la construction. L'entreprise souhaite moderniser ses processus de gestion des données pour améliorer l'efficacité de ses projets et optimiser les coûts. Dans le cadre de cette mission, vous serez chargé de concevoir et de mettre en place des solutions de stockage et de traitement des données pour soutenir les différents services de l'entreprise. Vous travaillerez en étroite collaboration avec les équipes IT et les experts métiers pour identifier les besoins en données et proposer des solutions adaptées.


Responsabilités

Concevoir et développer des pipelines de données robustes et efficaces pour garantir l'intégrité et la qualité des données tout au long de leur cycle de vie

Implémenter et gérer des systèmes de stockage de données adaptés aux besoins de l'entreprise, en choisissant les technologies appropriées

Intégrer des solutions de traitement des données en temps réel pour répondre aux exigences métiers

Collaborer avec les équipes de développement logiciel pour assurer la compatibilité des solutions de données avec les applications existantes

Assurer la sécurité et la conformité des données en appliquant les meilleures pratiques en matière de gestion des données

Fournir un support et des conseils techniques aux équipes projets pour les aider à exploiter pleinement les solutions de données mises en place


Profil recherché

Expérience significative en tant que Data Engineer, idéalement dans le secteur du bâtiment et de la construction

Excellente maîtrise des technologies de traitement des données, telles que Hadoop, Spark, Kafka, etc.

Compétences avancées en programmation, notamment en Python, Java, ou Scala

Expérience en conception et gestion de bases de données relationnelles et NoSQL

Connaissances solides en architecture de données et en modélisation de données

Capacité à travailler de manière autonome et à collaborer efficacement avec des équipes multidisciplinaires

Excellentes compétences en communication pour présenter des concepts techniques à des audiences non techniques