Data Engineer Sénior H/F

Panda Services est une Entreprise de Services du Numérique spécialisée en Ingénierie Informatique, recherchant pour l’un de ses clients à Paris un(e) Data Engineer Sénior

 

🎯 Vos missions

• Animer les daily meetings et assurer le suivi opérationnel de l'équipe.

• Piloter les choix techniques et garantir la qualité des développements.

• Accompagner et faire monter en compétence les développeurs (coaching, revue de code, conseil, refactoring).

• Interagir avec les clients afin de comprendre leurs enjeux métier et proposer des solutions adaptées.

• Participer à la définition, à la conception et à l'évolution de l'architecture Data et technique.

• Concevoir et développer une plateforme de données de bout en bout en collaboration avec les architectes Data et les équipes SI.

• Concevoir, industrialiser et optimiser les pipelines de traitement de données à grande échelle sous Spark/PySpark.

• Mettre en œuvre les flux d'ingestion, de transformation et de valorisation des données selon une architecture Data Lake (Bronze, Silver, Gold).

• Participer à l'intégration des données en temps réel via Kafka Streaming.

• Développer et maintenir les API REST nécessaires à l'exposition des services de données.

• Contribuer à l'automatisation des déploiements et à l'amélioration continue des pratiques DataOps et DevOps.

🛠 Compétences requises

• Excellente maîtrise de Spark / PySpark.

• Très bonnes connaissances en Python.

• Expérience significative sur MongoDB.

• Bonne maîtrise des architectures Data Lake et des plateformes Data.

• Expérience sur Kafka Streaming.

• Connaissances des outils d'orchestration de traitements (Airflow).

• Maîtrise des environnements Hive et des solutions de visualisation de données (Superset).

• Expérience sur les API REST.

• Connaissances des outils DevOps : Docker, Ansible.

• Compréhension des architectures Cloud AWS et/ou Azure.

• Capacité à prendre de la hauteur sur les sujets techniques et organisationnels.

👤 Profil recherché

• Minimum 5 ans d'expérience en Data Engineering.

• Profil Senior avec expertise confirmée sur les technologies Big Data.

• Expérience en conception d'architectures Data et industrialisation des traitements.

• Leadership technique reconnu et excellent relationnel.

• Capacité à encadrer, accompagner et faire progresser une équipe de développeurs.

• Forte autonomie et sens des responsabilités.