Data Engineer - Ingénieur Data & Big Data H/F

Dans le cadre du développement de ses activités Data & Big Data, notre client, acteur majeur de la protection sociale, recherche un Ingénieur Data / Big Data expérimenté pour renforcer ses équipes.

Vous interviendrez au sein d'une équipe dédiée à la gestion et à l'évolution d'une plateforme Data Lake / Hadoop, dans un environnement technique riche et orienté production.

Vos missions

Rattaché(e) au responsable Big Data, vous aurez notamment pour missions de :

Développer et maintenir les traitements d'alimentation de la plateforme Data Lake.
Faire évoluer les traitements existants en fonction des nouveaux besoins.
Développer des extractions et requêtes SQL à partir des données disponibles.
Automatiser les traitements à l'aide de scripts Shell.
Participer à l'optimisation des traitements et des performances de la plateforme.
Réaliser des investigations et du reverse engineering sur une architecture existante et complexe.
Assurer le support de niveau 2.
Effectuer des revues de code et garantir la qualité des développements.
Documenter les développements, procédures et processus.
Accompagner les utilisateurs et expliquer les sujets techniques à différents interlocuteurs.
Participer à la structuration et au suivi des activités via JIRA.
Contribuer au transfert de compétences auprès des membres de l'équipe.
Veiller à la maintenabilité, l'exploitabilité et la performance de la plateforme.
Environnement technique
Cloudera Hadoop
Hive / Impala
Python
SQL
Shell
Spark / Scala
Linux
Git
VBA
Jupyter
JIRA