Tech Lead Data Platform - Freelance

Contexte

Notre client, acteur majeur du secteur transport, recherche un Tech Lead Data Platform dans le cadre de la reconstruction de sa plateforme data en interne.

Une nouvelle équipe dédiée est en cours de constitution, à la croisée du développement et de la BI/Data. Des data engineers partenaires sont déjà en poste et maîtrisent la stack technique, mais l'équipe manque aujourd'hui d'un Tech Lead côté data capable de les encadrer, de les challenger et de poser un cadre de travail structuré.

L'environnement est fortement orienté architecture, avec des instances de validation régulières où les choix techniques sont challengés collectivement par des profils expérimentés. Le candidat devra donc être à l'aise pour défendre ses positions face à des interlocuteurs seniors, tout en restant force de proposition.

Missions

• Poser un véritable framework d'ingestion, à la fois technique et méthodologique : définir les bonnes pratiques, structurer la chaîne de traitement des données, documenter les choix.

• Challenger aussi bien les architectes internes que le partenaire externe déjà en place, sans se laisser imposer des décisions qui ne tiennent pas compte des contraintes opérationnelles réelles.

• Accompagner la montée en compétences des développeurs internes actuellement affectés aux flux de données, qui travaillent aujourd'hui sur Talend et qui vont progressivement basculer sur la nouvelle stack technique.

• Poser les premières bases d'un cadre d'usage de l'intelligence artificielle au sein de l'équipe, dans un contexte où la maturité sur ce sujet est quasi nulle mais l'ambition réelle.

• Interagir régulièrement avec l'équipe d'architecture dans le cadre des comités hebdomadaires.

• Participer à la réécriture d'une alimentation de données historique reposant sur une solution devenue obsolète.

• Contribuer au décommissionnement d'une ancienne solution technologique.

Stack technique

• Python comme langage central

• DLT pour l'ingestion des données

• DBT pour les transformations

• Airflow pour l'orchestration des pipelines

• Outil de type Knime pour le contrôle qualité des données

• Infrastructure basée sur un Azure Data Lake Storage existant, organisé selon le principe du médaillon en trois couches : Bronze, Silver et Gold

Conditions de travail

• Durée : 6 mois, potentiellement prolongeable jusqu'à un an selon l'avancement du projet et les besoins ultérieurs

• Démarrage : dès que possible, avec un objectif de MVP fonctionnel avant la fin du second semestre de l'année

• Lieu : Lille, en mode hybride avec une présence locale obligatoire sur site (3 jours sur site, 2 jours en télétravail)

• Télétravail complet non envisageable pour ce poste