OmDev Logo
GetYourJob
0
Publié il y a 9 jours

Data Engineer Expert Python / Databricks / Spark - F/H

Entreprise
Localisation
Paris, Île-de-France
Sur site
Type de contrat
CDI
Niveau
Top profil

Salaire du marché

Médiane du marché
53k€
Estimation
48k€fourchette habituelle65k€

Cette offre n'affiche pas de salaire. D'après 15 offres pour ce poste (Top profil, France), le marché se situe autour de 53k€ (48k€–65k€).

0vues
0clics

Description du poste

Descriptif de la société
INGENIANCE est une ESN spécialisée en finance de marché, banque et assurance depuis plus de 18 ans. Nous accompagnons les grands acteurs bancaires et assurantiels français sur leurs projets les plus critiques, avec une expertise reconnue en Craft Development, Big Data, Cloud/DevOps et Agilité. Rejoindre Ingéniance, c'est intégrer une communauté d'experts, être accompagné par un management de proximité et construire son parcours sur des missions à forte valeur ajoutée. Build your success!
Contexte de la mission
Nous recherchons pour une mission longue chez notre client secteur banque/finance en région parisienne un Data Engineer Expert maîtrisant Python, Databricks et Spark.
Vous intégrez une équipe data dont la mission est d'industrialiser et de sécuriser les processus d'acquisition, de préparation et de qualification de données orientées prévision (forecasting) dans le domaine de l'énergie. Vos principales responsabilités :

  • Concevoir et développer des pipelines ETL robustes en Python et .NET/C# pour l'acquisition et la transformation de données structurées et non structurées
  • Garantir la qualité de la donnée : dédoublonnage, validation, standardisation, référencement
  • Créer et maintenir des DAGs Airflow pour orchestrer les dépendances entre traitements ETL
  • Exploiter la plateforme Databricks : exécution de jobs Spark, gestion des clusters, optimisation des requêtes SQL
  • Concevoir des schémas de données performants et optimiser les requêtes sur des entrepôts de données relationnels
  • Contribuer aux choix d'architecture et à la mise en place des bonnes pratiques data au sein de l'équipe
  • Rédiger les spécifications techniques et les tests unitaires associés
  • Assurer le monitoring en production et la maintenance des traitements déployés
Profil recherché
Formation Bac+5 en informatique, mathématiques appliquées ou équivalent. Expérience confirmée de 5 ans minimum en data engineering, avec une maîtrise experte de Python (v3) et une solide pratique de .NET/C#. Vous êtes à l'aise avec SQL et les data warehouses relationnels. Une expérience sur Databricks/PySpark et AWS est un vrai atout, de même qu'une pratique d'Airflow. La connaissance des séries temporelles et du forecasting sera appréciée. Vous êtes autonome, rigoureux, orienté qualité et capable de collaborer efficacement avec des équipes pluridisciplinaires (Data Analysts, Data Scientists, architectes). Niveau d'anglais professionnel indispensable (langue de travail de l'équipe). Méthodes Agile appréciées.
Informations complémentaires
Conformément à la réglementation, et à notre politique d'égalité professionnelle, tous nos postes sont ouverts aux personnes en situation de handicap.

Exigences du poste

Stack technique :

ETLAgileAirflowMonitoring / ObservabilityData EngineeringApache SparkPythonC#SQLAWS.NETDatabricksBig DataTests unitairesDevOps

Plan d'action

Un plan personnalisé pour postuler intelligemment à cette offre.

Publié par

Recruteur
Recruteur

Intéressé par cette offre ?

Cliquez sur "Postuler" pour accéder à l'offre.