OmDev Logo
GetYourJob
0
Publié il y a 4 jours

Data Engineer Senior / Expert – Spark, AWS, dbt, Iceberg (H/F)

Entreprise
Localisation
Nantes, Pays de la Loire
Hybride
Type de contrat
Freelance
Niveau
Top profil
Rémunération
550 – 650 €/jour• Taux journalier

Salaire du marché

Médiane du marché
550€/j
Dans le marché
490€/jfourchette habituelle600€/j
Cette offre : 600€/j

Basé sur 55 offres pour ce poste (Top profil, France, 3 derniers mois). Fourchette habituelle 490€/j–600€/j, médiane 550€/j. Cette offre (600€/j) est dans la fourchette.

TJM du marché pour Data Engineer (Top profil) en France : médiane 550 €/jour, P25–P75 : 490–600 €/jour, n = 55 offres des 3 derniers mois. TJM AWS / Cloud à Nantes

Baromètre TJM et salaires IT

Description du poste

Contexte

Dans le cadre du renforcement de l’équipe Marketing Data au sein du pôle Data Fabric d'un acteur majeur du numérique et des mobilités, nous recherchons un consultant Data Engineer Senior / Expert capable d’intervenir de manière autonome sur la conception, l’industrialisation et l’exploitation de produits et pipelines Data. La mission s’inscrit dans un environnement Lakehouse AWS, avec des enjeux de qualité, performance, fiabilité des traitements et maîtrise du RUN.

Missions principales

• Concevoir, développer et optimiser des pipelines de données.

• Développer et industrialiser les traitements avec Spark/PySpark, Python, SQL et dbt.

• Exploiter des données au format Apache Iceberg dans une architecture Lakehouse / Medallion.

• Orchestrer les traitements avec Airflow.

• Déployer et maintenir les traitements sur AWS et contribuer à l’Infrastructure as Code avec Terraform.

• Mettre en œuvre les contrôles de Data Quality, tests et mécanismes d’observabilité.

• Participer au RUN, à l’analyse des incidents et au traitement des causes racines.

• Contribuer à la documentation, au Data Lineage, aux Data Contracts et au Data Catalog.

• Travailler avec les Product Owners et interlocuteurs métier pour traduire les besoins Marketing en solutions Data robustes et maintenables.

Livrables

• Pipelines Data développés, testés et industrialisés ; transformations Spark et modèles dbt ; workflows Airflow.

• Infrastructure Terraform nécessaire aux traitements.

• Tests automatisés, contrôles de Data Quality, monitoring et alerting.

• Documentation technique et fonctionnelle, documentation des modèles et règles métier.

• Contribution aux Data Contracts, lineage et métadonnées.

• Analyse et résolution des incidents, plans de remédiation.

• Contribution aux standards et bonnes pratiques Data Engineering de l'équipe.

Modalités

• Lieu : Nantes – temps plein, 3 jours de télétravail par semaine

• Déplacements et astreintes : occasionnels

• Démarrage : dès que possible – fin estimée : 31/08/2027

Profil recherché

• 8 années minimum d’expérience en Data Engineering (profil Senior / Expert)

• Maîtrise avancée des architectures Big Data et Lakehouse

• Expertise réelle sur Spark, dbt, Apache Iceberg et services AWS (Glue, EMR, S3…)

• Connaissance de Trino / Starburst et Datadog

• Forte capacité d’analyse et de compréhension des enjeux métiers ; la connaissance du Marketing est appréciée

• Rigueur, autonomie et culture de l’amélioration continue

Compétences clés

Obligatoire : Développement Spark, AWS, Python, Big Data, outils de modélisation data, collecte de données

Important : dbt, Starburst

Intéressant : Data Catalog

Exigences du poste

Compétences requises

  • AWS S3
  • Airflow
  • Apache Spark
  • AWS
  • AWS Glue
  • Big Data
  • Data Lakehouse
  • Data Quality
  • Datadog
  • PySpark
  • Python
  • SQL
  • Terraform
  • Trino

Un plus

  • dbt
  • Apache Iceberg
  • Apache
  • QA Testing
  • Monitoring / Observability
  • Documentation technique
  • Continuous Improvement
  • Data Engineering
  • Infrastructure as Code
  • Test Automation

Toutes les offres IT à Nantes

Plan d'action

Un plan personnalisé pour postuler intelligemment à cette offre.

À propos de l'entreprise

Depuis 1972, AI&DATA accompagne les grands comptes dans la valorisation de leurs données, avec plus de 2 000 projets réalisés. Aujourd’hui, notre cabinet de conseil conjugue expertise Data et intelligence artificielle pour répondre aux enjeux métiers de clients issus de secteurs variés : banque, assurance, retail, énergie, luxe ou industrie. Nos équipes interviennent sur toute la chaîne de valeur de la donnée : architecture et ingénierie, gouvernance, Data Science, Business Intelligence, activation marketing et pilotage de projets. Elles développent également des solutions d’IA générative, des agents intelligents et des assistants métiers pour transformer l’innovation en applications concrètes. Notre conviction : la réussite d’un projet repose autant sur l’excellence technique que sur la qualité des relations humaines, deux dimensions au cœur de notre sélection des experts et de notre approche du conseil.

Voir toutes les offres de AI&DATA

Publié par

Recruteur
Recruteur

Intéressé par cette offre ?

Cliquez sur "Postuler" pour accéder à l'offre.