Stage Data Engineer - plateforme de données

Intégré(e) à la Squad Connect et managé(e) par un Data Engineer expérimenté, tu seras amené(e) à réaliser des développements sur notre plateforme de données.

Tu interviens avec trois objectifs clés

• Développement de connecteurs, pour intégrer de nouvelles sources de données

• S’assurer de la fiabilité de la plateforme

• Post traitements et valorisation de la données

🔄 Développement de nouveaux connecteurs

• Gérer la transformation et l’intégration de sources et formats de données variées (Bases de données, CSV, Pdf, Images, JSON) vers notre stockage centralisé

• Optimiser les performances des connecteurs existants pour réduire les temps de traitement et les coûts

• Réaliser des QA afin de s’assurer que les nouveaux développements fonctionnent bien sur notre environnement de test

🔁 S’assurer de la fiabilité de la plateforme

• Mettre en place des tests automatisés de qualité pour détecter les anomalies avant qu’elles n’impactent la production

• Participer à la résolution d’incidents (debugging de scripts, optimisation du code) aux côtés de l’équipe

• Assurer le monitoring et résoudre les bugs arrivant sur nos environnements de production

• Participer aux releases, processus de déploiement des nouvelles versions

🔄 Post-traitements et valorisation de la données

• Développer les scripts de post-traitement indispensables à la structuration des données (Statistique, indexation OpenSearch)

• Collaborer avec l’équipe Produit et Applicative pour s’assurer que la donnée livrée correspond parfaitement aux attentes de notre application et aux cas d’usage de nos clients.