Data Engineer / Plateforme Big Data - Lille - Freelance
Salaire du marché
Basé sur 10 offres pour ce poste (tous niveaux, Lille, 3 dernières semaines). Fourchette habituelle 375€/j–500€/j, médiane 420€/j. Cette offre (575€/j) est au-dessus de la fourchette.
Description du poste
Contexte
Développement d'une plateforme de gestion et d'observabilité des données BigQuery.
La plateforme globale est conçue et opérée à travers deux couches stratégiques :
Socle d'Infrastructure Standardisé (Infrastructure Plane) : Masquage de la complexité technique du cloud via des services managés clés en main dédiés à l'ingestion, au calcul et à la distribution des flux de données (GCP, Kafka, BigQuery).
Plan d'Expérience des Produits de Données (Data Product Plane) : Mise à disposition des équipes métiers d'outils logiciels pour concevoir, valider et gouverner leurs propres actifs de données en autonomie.
La feuille de route vise la simplification en faisant évoluer une architecture historique (microservices Python/FastAPI sur GCP) vers un écosystème ouvert, moderne et standardisé.
Missions
Garantir une visibilité universelle (Observabilité) : intégrer des standards ouverts (comme OpenLineage) pour cartographier la traçabilité de bout en bout, monitorer la fiabilité des données et automatiser la remédiation en cas d'anomalie, quels que soient les outils métiers.
Tracer le golden path des développeurs (DevEx) : concevoir des bibliothèques, utilitaires d'automatisation et briques logicielles autonomes dotées de capacités agentiques pour supprimer les frictions du cycle de mise en production et systématiser la création des Data Products.
Outils & Environnement
Python (expertise avancée, notamment FastAPI, Flask)
Google Cloud Platform (Cloud Run, Pub/Sub, BigQuery)
Écosystème data moderne : outils de transformation de données et orchestrateurs de conteneurs
CI/CD et conteneurisation : Docker, Cloud Build
Infrastructure as Code : Terraform (idéalement jusqu’à la maintenance ou création de providers)
Méthodologies agiles : Scrum ou Kanban
Conditions de travail
Date de démarrage : 24/08/2026
Présence souhaitée : 2 jours par semaine sur site
Compétences techniques
Python - Expert - Important
Workflow data - Confirmé - Important
IA Engineering, DataOps, Gouvernance - Confirmé - Souhaitable
Connaissances linguistiques
Anglais professionnel
Exigences du poste
Stack technique :
Plan d'action
Un plan personnalisé pour postuler intelligemment à cette offre.
À propos de l'entreprise
Publié par
Intéressé par cette offre ?
Cliquez sur "Postuler" pour accéder à l'offre.