Data Engineer / Analytics Engineer expérimenté – Spécialiste dbt & BigQuery - Freelance

Contexte

Une organisation engagée dans le décommissionnement de son environnement SAP BW étoffe son équipe Data Platform. L’objectif est de concevoir, industrialiser et optimiser ses flux de données sur Google Cloud.
Les données sources arrivent à l’état brut dans BigQuery par l’intermédiaire de SAP Datasphere. L’essentiel de la mission consiste à les transformer en modèles analytiques robustes, performants et directement utilisables pour les besoins décisionnels.

Livrables

• Pipelines de transformation réalisés avec dbt sur BigQuery.
• Modèles analytiques structurés et documentés.
• Contrôles qualité intégrés aux traitements.
• Développements versionnés et inscrits dans la chaîne CI/CD.
• Documentation technique et documentation d’exploitation.

Responsabilités

• Concevoir et développer les transformations de données dans BigQuery avec dbt.
• Organiser les modèles selon une architecture médaillon en plusieurs couches : données brutes, données nettoyées et harmonisées, puis modèles analytiques.
• Transposer en SQL les règles de gestion établies avec les interlocuteurs métier et techniques.
• Améliorer la performance et maîtriser les coûts des traitements BigQuery, en s’appuyant notamment sur le partitionnement, le clustering et des stratégies de chargement appropriées.
• Définir et déployer des tests et contrôles de qualité des données.
• Industrialiser les développements en appliquant les bonnes pratiques de versionnement, de revue de code et d’intégration/déploiement continus.
• Participer à la fiabilisation des pipelines et à l’analyse des incidents.
• Documenter les modèles de données, les transformations et les procédures d’exploitation.
• Le cas échéant, participer à la mise à disposition des données dans Looker via LookML.

Conditions de travail

• Localisation : Paris
• Démarrage : dès que possible
• Durée : mission longue
• Expérience exigée : 7 ans minimum