Ingénieur lead data H/F

Nous recherchons un(e) Expert(e) sur les données pour assurer le traitement, la cohérence et la valorisation des données que nous manipulons au sein du pôle data de la DINUM. Ce rôle associe expertise métier et technique, accompagnement des produits interministériels, et animation de l’écosystème autour des jeux de données ouverts et confidentiel sur les entreprises ou les particuliers.

L’expert(e) sera un référent transverse entre plusieurs produits stratégiques. Il apportera conseil et vision pour garantir leur complémentarité et leur alignement avec les besoins des administrations et des usagers. Il devra être le contact privilégié avec les nouveaux fournisseurs de données irrigant les différents produits.

Au sein du pôle Data, il/elle contribuera au développement et à l’exploitation des pipelines de données et des infrastructures utilisées par les produits du pôle.

Il/elle interviendra notamment sur les sujets suivants :

•        conception et maintenance des pipelines de traitement et de diffusion de données ouvertes (INSEE, Météo-France, DGFIP, ARCEP, etc.) ;

•        amélioration des services autour des données sur data.gouv.fr (apification, transformations de formats, enrichissement de données) ;

•        travail autour de la qualité des données et des schémas de données, notamment via schema.data.gouv.fr ;

•        mise en place et exploitation des infrastructures de métriques et d’observabilité des produits et APIs du pôle Data ;

•        accompagnement des équipes sur les problématiques d’infrastructure, de performance et d’industrialisation des traitements de données.

Les technos
Nous utilisons principalement Python pour nos traitements de données et le développement de services.

Notre stack technique comprend notamment : Python ; Airflow ; PostgreSQL ; MongoDB ; Elasticsearch ; MinIO / stockage objet compatible S3 ; Docker ;

Nous manipulons des volumes de données variés ainsi que des formats multiples, structurés ou non structurés.

Une expérience autour des données géographiques et des outils géo (PostGIS, GDAL, geopandas, etc.) est un plus.