Data Engineer / Administrateur Plateforme Data Cloudera CDP – Confirmé/Senior (H/F)

Contexte

Dans le cadre du renforcement de son équipe Data & IA, notre client recherche un Data Engineer / Administrateur Plateforme Data pour assurer l'administration, l'exploitation et l'évolution des infrastructures Data basées sur Cloudera CDP et les technologies Open Source.

Vous interviendrez sur des plateformes critiques en collaboration avec les équipes applicatives, infrastructures, métiers et internationales afin de garantir la disponibilité, les performances et l'évolution des environnements Data.

MissionsAdministration & Exploitation

• Administrer et maintenir les plateformes Data Cloudera CDP.

• Garantir le maintien en condition opérationnelle des infrastructures.

• Superviser les plateformes et assurer le traitement des incidents.

• Participer aux astreintes et aux interventions hors horaires ouvrés.

• Optimiser les performances et la capacité des plateformes.

Data Engineering

• Concevoir les solutions d'ingestion de données (API).

• Mettre en œuvre des architectures de stockage (Hadoop, Ozone, Druid, ClickHouse...).

• Développer et automatiser les traitements de données.

• Mettre en place les tests unitaires et d'intégration.

• Industrialiser les traitements de nettoyage et de transformation des données.

Évolution des plateformes

• Participer aux migrations des clusters Hadoop Cloudera.

• Contribuer au déploiement des nouvelles plateformes Cloudera Data Services sous OpenShift/Kubernetes.

• Être force de proposition sur les évolutions techniques.

• Participer au design des infrastructures Data.

Support & Expertise

• Résoudre les incidents complexes (Hive, Spark, Yarn...).

• Accompagner les équipes applicatives et métiers.

• Assurer un support technique de haut niveau.

• Participer à la documentation et au partage de connaissances.

Environnement techniqueImpératif

• Cloudera CDP 7.1.x

• RedHat Enterprise Linux 8 & 9

• Python

• Java

• Ansible

• DevOps

Très bonnes connaissances

• Hadoop

• Hive

• HBase

• Kafka

• Spark

• Solr

• Knox

• Ranger

• ZooKeeper

• Kerberos

• LDAP

Appréciées

• OpenShift

• Kubernetes

• Trino / Starburst

• Airflow

• Flink

• Maven

• Gradle

• ClickHouse

• Ozone

• Druid

Profil recherché

• Formation Bac+5 en informatique ou équivalent.

• Expérience significative sur des plateformes Big Data Cloudera.

• Expertise Linux RedHat.

• Bonne maîtrise des environnements Open Source Data.

• Solides compétences en automatisation (Ansible).

• Connaissances DevOps.

• Capacité à analyser et résoudre des incidents complexes.

• Esprit d'équipe, autonomie et bonnes capacités de communication.

Conditions

• Couverture de l'équipe : 8h00 – 19h00

• Astreintes et interventions hors horaires ouvrés selon un planning de rotation.

• Niveau attendu : Confirmé / Senior (N4).

Compétences clés : Cloudera CDP 7.1.x, RedHat 8/9, Hadoop, Spark, Hive, Kafka, Python, Java, Ansible, DevOps, OpenShift, Kubernetes.