Data Engineer AWS/Snowflake

La mission est chez un client à Liège, en Belgique. Nous recherchons donc quelqu'un mobile pour pouvoir y résider.

1. Contexte du poste

Dans le cadre du développement et de l'évolution de notre plateforme Data, nous recherchons un Data Engineer spécialisé dans les environnements AWS et Snowflake.

Il interviendra sur la conception, le développement et l'industrialisation des flux de données, afin de garantir la disponibilité, la qualité et la performance des données.

2. Missions principales

• Concevoir, développer et maintenir des pipelines de données (ETL / ELT).

• Collecter, intégrer et transformer des données issues de différentes sources.

• Développer des traitements et transformations de données en SQL et Python.

• Concevoir et optimiser les modèles de données dans Snowflake.

• Mettre en œuvre les services AWS, notamment S3, Glue, Lambda, IAM et CloudWatch.

• Assurer l'orchestration, la supervision et la fiabilité des traitements.

• Optimiser les performances des requêtes et les coûts d'exploitation.

• Mettre en place les bonnes pratiques d'industrialisation et de CI/CD.

• Participer à l'évolution de l'architecture Data et à l'amélioration continue de la plateforme.

3. Compétences techniques requises

• Snowflake : ingestion, transformation, modélisation et optimisation des données.

• AWS : maîtrise des services S3, Glue, Lambda, IAM et CloudWatch.

• Langages : SQL avancé et Python.

• Data Engineering : ETL / ELT, Data Warehouse, Data Lake et modélisation de données.

• Industrialisation : Git, CI/CD et automatisation des déploiements.

• Outils complémentaires appréciés : dbt, Airflow, Terraform, AWS Step Functions.

4. Profil recherché

• Formation supérieure Bac+5 en informatique ou Data Engineering.

• Expérience de 3 à 5 ans minimum sur un poste de Data Engineer.

• Expérience significative sur les environnements AWS et Snowflake.

• Bonne maîtrise de SQL et Python.

• Capacité à concevoir et industrialiser des pipelines de données.

• Bonne compréhension des enjeux de qualité, sécurité et performance des données.

• Autonomie, rigueur, esprit d'analyse et capacité à travailler en équipe.

5. Environnement technique

Cloud : AWS
Data Warehouse : Snowflake
Développement : SQL, Python
Stockage : Amazon S3
ETL / ELT : AWS Glue, dbt
Orchestration : Airflow / Step Functions
DevOps : Git, CI/CD, Terraform

Profil recherché

4. Profil recherché

• Formation supérieure Bac+5 en informatique ou Data Engineering.

• Expérience de 3 minimum sur un poste de Data Engineer.

• Expérience significative sur les environnements AWS et Snowflake.

• Bonne maîtrise de SQL et Python.

• Capacité à concevoir et industrialiser des pipelines de données.

• Bonne compréhension des enjeux de qualité, sécurité et performance des données.

• Autonomie, rigueur, esprit d'analyse et capacité à travailler en équipe.