Ingénieur DATA - Lyon
Salaire du marché
Basé sur 114 offres pour ce poste (Senior, France, 3 dernières semaines). Fourchette habituelle 48k€–55k€, médiane 55k€. Cette offre (48k€) est dans la fourchette.
Description du poste
Il s'agit d'assister le client en tant qu'ingénieur DATA sur le service de cloud datawarehouse sous Azure.
Nous recherchons un Data Engineer ayant déjà fait du DevOps, capable de travailler à la fois sur les traitements de données (Databricks, architecture médaillon bronze / silver / gold) et sur l'infrastructure cloud associée (Azure, Terraform, Jenkins), dans un contexte d'entreprise avec des standards Git et CI/CD.Du conseil, des études d'opportunité et dossiers d'innovation seront demandés.
Missions principales (Data & supervision)
• Concevoir, développer et enchaîner des notebooks Databricks en PySpark pour alimenter les zones bronze, silver et gold.
• Maîtriser et exploiter les formats parquet, delta et csv, en comprenant leurs impacts sur la performance, la robustesse et les coûts.
• Optimiser les notebooks et jobs existants (performance, qualité de données, coûts d'exécution).
• Mettre en place et faire vivre la supervision des flux : monitoring des pipelines Azure Data Factory, suivi de la qualité des données, création d'alertes et de tableaux de bord de suivi.
• Contribuer à la fiabilisation globale de la plateforme data (détection d'anomalies, reprise sur incident, bonnes pratiques de développement).
• Collaborer avec les équipes métier et techniques pour comprendre les besoins, prioriser les évolutions et industrialiser les traitements.
Missions annexes (DevOps & infra)
• Mettre à jour et faire évoluer les repos d'infrastructure (Terraform, Jenkins) en suivant les templates et bonnes pratiques du git d'entreprise.
• Maintenir, paramétrer et exécuter les pipelines Jenkins liés aux déploiements et aux traitements data, en garantissant leur fiabilité et leur traçabilité.
• Participer activement à la vie des repos GitHub : revue de code (PR/MR), gestion des branches, compréhension des workflows Git avancés, automatisation et diffusion des bonnes pratiques.
Technologies & environnement technique
• Cloud & data platform : Azure, Databricks, Azure Data Factory, Azure Storage Account, Azure Key Vault, Power BI.
• Infra & CI/CD : Terraform, Jenkins, GitHub (PR/MR, workflows), intégration runtime via VM.
• Langages & frameworks : Python, PySpark (DataFrame API, Spark SQL), SQL.
• Formats & data : parquet, delta, csv…
• Librairies Python courantes :
o pyspark (transformations, jointures, agrégations, optimisations).
o delta-spark et librairies Delta Lake pour la gestion des tables (ACID, time travel, optimisation).
o Packages Azure (azure-identity, azure-keyvault-secrets, azure-storage-blob, etc.) pour l'intégration avec les services cloud.
Exigences du poste
Stack technique :
Plan d'action
Un plan personnalisé pour postuler intelligemment à cette offre.
À propos de l'entreprise
Octogone est une entreprise de services du numérique (ESN) française fondée en 2018. Nous accompagnons les organisations dans leur transformation digitale en mettant à leur disposition des experts capables d’intervenir sur l’ensemble de la chaîne de valeur des systèmes d’information : SAP, Cloud, Data, cybersécurité et infrastructures. Notre ambition est d’aider les entreprises à tirer pleinement parti des technologies numériques afin d’améliorer leur performance opérationnelle et de renforcer leur compétitivité. La transformation des organisations nécessite aujourd’hui une vision globale. Chez Octogone, nous sommes convaincus que la création de valeur repose sur la maîtrise conjointe de la technologie et de la stratégie. C’est pourquoi nous adoptons une approche qui combine conseil, expertise technique et accompagnement opérationnel. Nous travaillons aux côtés de nos clients pour concevoir des solutions adaptées à leurs enjeux, optimiser leurs processus et renforcer durablement leur efficacité. Depuis sa création, Octogone s’appuie sur un réseau d’experts et un centre de compétences solide, notamment autour de l’écosystème SAP, afin de proposer un accompagnement sur mesure à des entreprises de toutes tailles, des PME aux grands groupes. Notre objectif est de permettre aux organisations de gagner en agilité, d’accélérer leur transformation numérique et de développer une intelligence collective capable de soutenir leur croissance dans un environnement en constante évolution.
Voir toutes les offres de OCTOGONEPublié par
Intéressé par cette offre ?
Cliquez sur "Postuler" pour accéder à l'offre.