Data Engineer - CDI

Salaire: Selon profil

1) Plateforme Data Core (Cloud & Gouvernance)

• Databricks : gestion des clusters, optimisation des performances des workloads Big Data, mise en place d’une gouvernance data solide.

2) Langages & Modélisation

• SQL (expert) : modélisation et interrogation des données, optimisation des requêtes.

• dbt : industrialisation des modèles, documentation et tests.

• PySpark : transformation et traitement de données à grande échelle.

• Python (expert) : développement et automatisation autour de la data.

3) Orchestration & MLOps

• Apache Airflow : création, monitoring et optimisation de DAGs complexes pour fiabiliser la chaîne de production data.

4) Méthodologie & Qualité

• Agile : Scrum / Kanban.

• Qualité & delivery : revue de code, bonnes pratiques, CI/CD via GitHub.

5) Communication Internationale

• Anglais courant indispensable : échanges quotidiens avec une équipe internationale et des partenaires globaux.

Compétences demandées (niveau)

• GitHub : Confirmé

• PySpark : Confirmé

• Databricks : Confirmé

• dbt : Confirmé

• Agile : Confirmé

• Optimisation SQL : Expert

• AWS : Avancé

• Python : Expert

• Apache Airflow : Confirmé

Langues

• Français : Courant

• Anglais : Courant

ATTENTON UNIQUEMENT PROFIL LILLOIS