Consultant Hbase - Aws Emr H/F

Description du poste

Dans le cadre du renforcement d'une plateforme Big Data stratégique, nous recherchons plusieurs Consultants HBase / AWS EMR afin d'assurer l'exploitation, l'optimisation et la fiabilisation d'environnements de production à forte volumétrie.

Vous interviendrez sur des plateformes critiques nécessitant une expertise approfondie sur HBase, AWS EMR et les problématiques de performance, de capacité et de disponibilité.

Vos missions

Exploitation et support

• Assurer le maintien en condition opérationnelle des plateformes HBase.
• Participer à l'exploitation quotidienne des clusters.
• Analyser et résoudre les incidents de production.
• Assurer le support de niveau 2 et 3.
• Garantir la disponibilité et la stabilité des environnements.

Performance et optimisation

• Identifier les problématiques de performance et les axes d'amélioration.
• Réaliser les analyses de capacité et les études de montée en charge.
• Optimiser les performances des clusters et des traitements.
• Analyser les métriques système et applicatives.
• Participer à l'amélioration continue des architectures existantes.

Administration HBase

• Administrer et maintenir les environnements HBase.
• Gérer les opérations de maintenance et d'évolution des clusters.
• Intervenir sur les problématiques liées aux Region Servers et HMaster.
• Superviser et optimiser les opérations de Major et Minor Compaction.
• Optimiser la gestion des HFiles, WAL, MemStore et Region Splits.
• Participer à la gestion de la volumétrie et de la croissance des données.
• Améliorer la répartition de charge et les performances de lecture/écriture.

Environnement technique

Big Data

• Apache HBase
• HDFS
• ZooKeeper

Cloud

• AWS
• Elastic MapReduce (EMR)

Systèmes

• Linux

Monitoring & Exploitation

• Supervision de clusters
• Analyse de performances
• Troubleshooting