Data Engineer - Freelance

Taux journalier (TJM): 500

Administrer les infrastructures Data – (Cloudera, Opensource)

Missions principales

Au sein de l'équipe Data & IA, vous aurez la charge de l'administration et de l'évolution des plateformes Data ainsi que des tâches quotidiennes liées au maintien de la production en condition opérationnelle.

Vos interlocuteurs privilégiés seront les équipes de production applicative, les équipes infrastructures, les plateformes internationales, mais également les équipes métiers pour lesquelles vous apporterez votre support et votre expertise technique.

Conception et mise en œuvre de l'ingestion et du stockage de données :

- Identifier et formaliser les besoins des métiers en matière de collecte et de stockage de données.

- Développer des solutions d'acquisition de données via API.

- Concevoir et implémenter des architectures de stockage de données robustes (Ex: Ozone, Hadoop, Druid, Clickhouse…).

- Valider la qualité des développements par des tests unitaires et d'intégration.

- Automatiser les traitements de données via la mise en place et la maintenance de batchs.

Valorisation et sécurisation des données :

- Industrialiser les processus de nettoyage et de transformation des données.

- Gérer et documenter des bases de données hétérogènes, en intégrant diverses sources de données.

- Veiller à la conformité RGPD dans la gestion du cycle de vie des données.

- Superviser l'exploitation et assurer la maintenance corrective et évolutive des systèmes de données.

Intégration et suivi des modèles prédictifs :

- Industrialiser le déploiement de modèles statistiques et de machine learning.

- Mettre en place des dispositifs de validation et de monitoring des modèles.

- Assurer le suivi opérationnel et la maintenance des modèles intégrés aux applications.

Contribution au pilotage projet :

- Définir les spécifications techniques précises en appui de l'analyse des besoins.

- Communiquer régulièrement l'état d'avancement des travaux au chef de projet.

- Capacité à communiquer et partager les informations vers notre communauté d’utilisateurs orienté métier.