Ingénieur DataOps

Au sein de l'équipe Data Usages décisionnels de la division Data, l'Ingénieur DataOps est responsable de l'exploitation quotidienne des environnements hors production (DEV, RCT, PREPROD).

Il garantit la disponibilité, la cohérence et la fiabilité des plateformes Data en réalisant les opérations techniques nécessaires :

• Refresh des données sur les différents environnements

• Installations applicatives (traitements Spark/Scala, ETLs Informatica, scripts sql Oracle, scripts shell, ...)

• Synchronisation des environnements : versions applicatives, versions software, configurations et paramétrages

• Monitoring et observabilité : Construire et maintenir un dashboard de monitoring des environnements (exécutions, volumes, ..)

• Automatisation des procédures : Développer les outils/scripts nécessaires permettant de réduire l'effort manuel (contrôle automatique des écarts entre environnements, validation post-installation et refresh, conhérence des bdd ..)

• Maintien en conditions opérationnelles : Exécution des jobs Spark, analyse des logs, contrôle des dépendances, suivi des batchs Opcon, relances des batch/jobs.

• Alerting / Reporting

Profil recherché

• Rigueur et discipline : Documentation systématique, automatisation des déploiement, respecter les standards d'exploitation

• Esprit d'investigation : Analyse des erreurs et métriques (software et hardware), comprendre la chaine Data et surveiller la pipeline de bout en bout.

• Au service de l'équipe : le Data Ops engineer travaille au sein d'une équipe plus large, et fournit les services Ops (installation, analyses, outils) à l'équipe de développement Data, l'équipe de production, et les clients de nos produits Data.

• Communication

Autonomie