FREELANCE – Data Engineer (H/F) - Freelance

Taux journalier (TJM): 500/550€

Notre client, basé à Rennes (35), est à la recherche d’un Data Engineer (H/F) freelance.

 

MISSIONS

Objectif : Développer, maintenir et faire évoluer les traitements data du groupe.

-       Développer des flux d’ingestion et de transformations

-       Migrer les traitements Cloudera / Hive / Hadoop vers Snowflake

-       Développer en Python, SQL et éventuellement PySpark

-       Exploiter des sources variées : API, Kafka, RabbitMQ, fichiers, bases relationnelles

-       Suivre la production, l’analyse d’incidents et les corrections

-       Participer aux revues de code et contribuer au Git

-       Documenter les traitements

 

ENVIRONNEMENT TECHNIQUE

·         Python, SQL

·         ETL/ELT, PySpark, Spark, Hive, Hadoop, Cloudera, Snowflake, BigQuery

·         Kafka, RabbitMQ

·         Git, Gitlab CI

·         Kubernetes