Data Engineer / Développeur Big Data – Spark Java & Databricks (F/H)
Salaire du marché
Basé sur 10 offres pour ce poste (Mid, Lyon, 3 dernières semaines). Fourchette habituelle 45k€–50k€, médiane 48k€. Cette offre (45k€) est dans la fourchette.
Description du poste
A LIRE ATTENTIVEMENT AVANT DE POSTULER ⬇
🏠 2 jours de télétravail / semaine - 📍 Lyon (07) - 🛠 Expérience de 3 ans minimum
Vous aimez autant comprendre ce que fait un pipeline que travailler sur la techno qui le fait tourner ?
Nous recherchons un·e Data Engineer / Développeur Big Data Spark pour rejoindre un projet qui offre une trajectoire technique intéressante : moderniser progressivement un SI Data existant, puis participer à sa migration vers Databricks dans le cloud.
L'enjeu n'est donc pas de repartir d'une feuille blanche. Vous travaillerez d'abord sur l'existant, comprendrez les flux et leurs enjeux métier, puis contribuerez à construire leur cible Big Data et Cloud.
Votre terrain de jeu : moderniser l'existant avant de construire la cible Cloud
Votre mission s'articulera autour de deux grandes étapes.
1/ Migrer progressivement les traitements vers Spark
Vous commencerez par vous approprier les flux de données existants et les processus métier associés.
Concrètement, vous allez :
- migrer des traitements Informatica et PL/SQL vers Spark en Java
- concevoir, développer et maintenir des pipelines de données
- optimiser les traitements existants en travaillant notamment sur leur performance et leur robustesse
- assurer la maintenance corrective et évolutive des traitements SQL / PL-SQL
- intervenir sur le BUILD comme sur le RUN, afin de comprendre le fonctionnement des traitements de bout en bout
- veiller à la qualité et à la fiabilité des données produites.
L'objectif : faire évoluer progressivement le patrimoine existant vers une architecture Big Data plus moderne, sans perdre la connaissance métier portée par les traitements historiques.
2/ Participer à la migration vers Databricks
Une fois cette première étape engagée, vous participerez à un projet stratégique de migration vers le Cloud avec Databricks.
Vous contribuerez notamment à :
- concevoir les futurs pipelines de données sous Databricks
- participer aux choix de conception et d'architecture
- industrialiser les nouveaux traitements
- faire évoluer les pratiques de développement et d'exploitation autour de cette nouvelle plateforme.
Vous aurez donc l'occasion de travailler sur l'existant et sa transformation, plutôt que d'intervenir uniquement sur la maintenance ou uniquement sur la cible.
Plan d'action
Un plan personnalisé pour postuler intelligemment à cette offre.
À propos de l'entreprise
Bienvenue chez CELAD ! Depuis nos débuts dans le monde bancaire en 1990, nous avons grandi pour devenir une force majeure dans le domaine de Systèmes d'Information & l'Informatique Industrielle. Notre #TeamCELAD de 1700 collaborateurs est fière de son implication dans ces deux domaines, travaillant avec plus de 250 clients, allant des PME/PMI aux Grands Comptes. CELAD-Sophia offre des missions stimulantes à forte valeur ajoutée de Cannes à Monaco, en passant par Sophia Antipolis et Nice. Grâce à notre diversité de clients, nous sommes actifs dans des secteurs aussi variés que la Banque et l'Assurance, le Médical, l'IT, la R&D, l'automobile et bien d'autres. Une véritable palette d'opportunités qui saura satisfaire tous les appétits ! Nous sommes entièrement impliqués dans la gestion de nos collaborateurs et l'accompagnement de nos candidats, ce qui en fait la base de notre développement ainsi que le reflet de la qualité de notre travail. La bienveillance, l'enthousiasme et la passion transparaissent dès le premier contact à votre accompagnement au quotidien ! Si vous souhaitez faire partie de l'aventure Celadienne, rejoignez-nous !
Voir toutes les offres de CeladPublié par
Intéressé par cette offre ?
Cliquez sur "Postuler" pour accéder à l'offre.