Data Engineer (H/F)

🚀 Contexte de mission

Dans le cadre du maintien en conditions opérationnelles et de l'évolution d'une plateforme Data stratégique, nous recherchons un Data Engineer / Administrateur Plateforme Data expérimenté pour intervenir sur des infrastructures Big Data basées sur Cloudera CDP et les technologies Open Source.

Vous rejoindrez une équipe Data & IA en charge de l'administration, de l'évolution et du support des plateformes Data. Vous collaborerez avec les équipes de production, d'infrastructure, les équipes internationales ainsi que les métiers afin de garantir la disponibilité, la performance et l'évolution des services Data.

🎯 Missions principales

Administration & Exploitation

• Administrer et maintenir les plateformes Data basées sur Cloudera CDP.
• Assurer le maintien en conditions opérationnelles des infrastructures Data.
• Superviser les plateformes et résoudre les incidents complexes.
• Participer aux astreintes et interventions hors heures ouvrées.

Conception & Développement

• Concevoir des solutions d'acquisition de données via API.
• Développer et automatiser les traitements de données.
• Concevoir des architectures de stockage performantes et sécurisées.
• Industrialiser les traitements de données et les pipelines.

Industrialisation & DevOps

• Automatiser les déploiements avec Ansible et les outils DevOps.
• Participer aux migrations et aux évolutions des plateformes Hadoop.
• Contribuer à l'amélioration continue des infrastructures Data.
• Participer aux stratégies de migration vers les environnements conteneurisés (OpenShift/Kubernetes).

Support & Expertise

• Accompagner les équipes projets et métiers dans leurs besoins Data.
• Participer à la résolution d'incidents complexes (Hive, Spark, Yarn…).
• Assurer la documentation technique et le partage des bonnes pratiques.
• Être force de proposition sur les évolutions technologiques.

🎯 Objectifs

• Garantir la disponibilité, la performance et la sécurité des plateformes Data.
• Industrialiser les traitements et les déploiements.
• Optimiser les infrastructures Cloudera et Open Source.
• Accompagner la modernisation des plateformes Data.
• Assurer le support technique auprès des équipes métiers et projets.

🛠️ Compétences requises

Techniques (Impératives)

• Cloudera CDP 7.1.x
• RedHat Enterprise Linux 8 & 9
• Python
• Java
• Ansible
• DevOps
• Hadoop
• Hive
• Spark
• Kafka
• HBase
• Ranger
• Knox
• Zookeeper
• Kerberos / LDAP
• Ozone
• Druid
• ClickHouse
• APIs REST

Compétences appréciées

• OpenShift / Kubernetes
• Cloudera Data Services (CDS)
• Trino / Starburst
• Airflow
• Flink
• Maven / Gradle
• Apache Open Source Ecosystem
• Machine Learning & industrialisation de modèles
• RGPD appliqué aux plateformes Data

🤝 Soft Skills

• Forte capacité d'analyse et de résolution de problèmes.
• Excellentes qualités de communication.
• Esprit d'équipe et sens du service.
• Autonomie et rigueur.
• Curiosité technique et veille technologique.
• Force de proposition.
• Capacité à évoluer dans un environnement critique.

👤 Profil recherché

• Expérience confirmée en administration de plateformes Big Data.
• Solide maîtrise de l'écosystème Cloudera CDP.
• Très bonnes connaissances Linux (RedHat).
• Expérience en automatisation et pratiques DevOps.
• Bonne maîtrise des technologies Open Source de l'écosystème Apache.
• Expérience des environnements de production critiques.
• Anglais professionnel.