Data Engineer Scala/Apark H/F - Boulogne
Salaire du marché
Basé sur 31 offres pour ce poste (Senior, Île-de-France, 3 dernières semaines). Fourchette habituelle 45k€–58k€, médiane 55k€. Cette offre (49k€) est dans la fourchette.
Description du poste
Dans le cadre de projets à forte volumétrie autour des domaines Risque, Finance et Reporting réglementaire, chez l'un de nos clients grands comptes, nous recherchons un Big Data Engineer confirmé pour intervenir sur la conception, le développement et l’industrialisation de traitements de données à grande échelle.
Vous aurez pour mission missions
- La conception et le développement de pipelines de données batch.
- L’alimentation de datamarts réglementaires Risque et Finance.
- L’alimentation des systèmes de reporting financiers et risques.
- L’intégration de données issues de sources variées : Core Banking, bases relationnelles, fichiers partenaires, systèmes internes, etc.
- La mise en place de contrôles de qualité, cohérence et complétude des données.
- L’optimisation des traitements sur de fortes volumétries : partitionnement, gestion des ressources, performances Spark, optimisation des requêtes.
- L’industrialisation et le déploiement des traitements via CI/CD, orchestration et monitoring.
- La réalisation des tests unitaires et des TNR.
- La documentation technique et la mise à jour des référentiels de données.
- La prise en compte des contraintes de sécurité, confidentialité et conformité réglementaire : RGPD, classification, anonymisation des données.
- La participation aux cérémonies Agile et aux réunions projets.
- La contribution aux activités de Run quotidien et mensuel.
Environnement technique
Scala – Spark – Hadoop – HDFS – Hive – Airflow – SQL avancé – Bases relationnelles – NoSQL – CI/CD – DevOps
Une très bonne maîtrise des problématiques Big Data, volumétrie et optimisation des performances est indispensable.
Exigences du poste
Stack technique :
Plan d'action
Un plan personnalisé pour postuler intelligemment à cette offre.
À propos de l'entreprise
Webnet naît avec l'arrivée du web en France et grandit dans l’idée qu’Internet va révolutionner le quotidien de millions de personnes et d’entreprises. En 1996, elle devient l’une des toutes premières sociétés françaises à mettre en œuvre des applications complexes reposant entièrement sur ces nouvelles technologies. Essor du mobile, des réseaux sociaux, des objets connectés… Webnet anticipe les évolutions du marché et s'adapte sans cesse aux différentes architectures techniques. Aujourd’hui, plus de 140 collaborateurs partagent la même approche d’un projet digital : multi-technologique, user centric, et collaboratif. Implantée dans 5 grandes villes de France, à Paris, Lyon, Nantes, Lille et Bordeaux, Webnet perpétue son excellence technologique en assurant l’épanouissement de ses collaborateurs dans un environnement de travail bienveillant. En plus de son engagement quotidien auprès de ses clients, comme en témoignent les plus de 2000 projets d’envergure à son actif, Webnet aide bénévolement des associations éthiques et citoyennes dans le développement de leur transformation digitale.
Voir toutes les offres de WebnetPublié par
Intéressé par cette offre ?
Cliquez sur "Postuler" pour accéder à l'offre.