OmDev Logo
GetYourJob
0
Publié il y a 22 jours

Data Engineer AWS – Data Platform & Lakehouse

Entreprise
Localisation
Île-de-France, France
Sur site
Type de contrat
Freelance
Niveau

Salaire du marché

Médiane du marché
490€/j
Estimation
440€/jfourchette habituelle550€/j

Cette offre n'affiche pas de salaire. D'après 84 offres pour ce poste (tous niveaux, Île-de-France), le marché se situe autour de 490€/j (440€/j–550€/j).

0vues
0clics

Description du poste

Contexte

Dans le cadre d’un programme stratégique associant Data et intelligence artificielle générative, nous recherchons un Data Engineer AWS pour participer au développement et à l’évolution d’une Data Platform destinée à alimenter des solutions métiers et des cas d’usage IA.

La plateforme est déjà en production sur AWS. La mission consiste à renforcer son architecture, développer de nouveaux pipelines et industrialiser la gestion des données selon une approche moderne de type Data Lakehouse.

Missions

  • Participer à la définition et à l’évolution de l’architecture de la Data Platform et du Lakehouse.

  • Concevoir, développer et optimiser des pipelines d’ingestion et de transformation de données.

  • Développer des jobs Data avec AWS Glue, Spark et PySpark.

  • Intégrer les services AWS dédiés au Data Management.

  • Développer et maintenir des API en Java 17/21 avec Spring Boot.

  • Traiter des données internes et provenant de fournisseurs externes.

  • Traduire les besoins fonctionnels en solutions techniques fiables et évolutives.

  • Participer à la mise en place d’un environnement Data Lab.

  • Industrialiser les développements et les déploiements avec des pipelines CI/CD.

  • Mettre en place les tests automatisés et les contrôles de qualité du code.

  • Garantir la sécurité, la performance et la maintenabilité des solutions.

  • Participer aux mises en production.

  • Assurer le support de production en cas d’incident majeur.

  • Produire et maintenir la documentation technique.

Compétences techniques
  • AWS : S3, Glue et services Data associés

  • Data Engineering : Spark, PySpark et Hadoop

  • Lakehouse : Apache Iceberg et Trino

  • Développement : Java 17/21 et Spring Boot

  • Bases de données : PostgreSQL et Oracle

  • Tests : JUnit 5 et Mockito

  • CI/CD : GitLab CI

  • Qualité et gestion des dépendances : SonarQube, Maven et Artifactory

  • Conteneurisation : Docker et Kubernetes

  • GitOps et déploiement : Argo CD

  • Formats : JSON, YAML et XML

  • Outils : GitHub, GitHub Copilot, IntelliJ IDEA, Jira et SharePoint

Exigences du poste

Stack technique :

Apache SparkAWS GlueJavaPostgreSQLPySpark

Plan d'action

Un plan personnalisé pour postuler intelligemment à cette offre.

À propos de l'entreprise

Créée en 2016, AVA2i est une entreprise tech qui va droit au but : Accompagner les organisations sur leurs enjeux IT avec efficacité, polyvalence et expertise réelle. Depuis nos débuts, nous avons développé une vision claire : 👉 être des experts généralistes capables d’intervenir là où l’IT a besoin de cohérence, de fiabilité et d’impact. Nous évoluons sur un large périmètre : Systèmes, Production, Cloud, DevOps, Data, Sécurité, Observabilité, Support, Exploitation .. Tout ce qui fait tourner, évoluer et sécuriser les environnements critiques de nos clients issus de tout les secteurs d'activité. Notre différence ? Nous ne faisons pas juste du conseil : Nous comprenons l’ensemble de l’écosystème, nous connectons les sujets entre eux et nous apportons des solutions concrètes, adaptées et pérennes. Polyvalents, mais pointus. Généralistes, mais exigeants ! 🚀 Pourquoi nous rejoindre ? Parce qu’AVA2i, c’est : ✅ des missions variées et stimulantes ✅ un environnement bienveillant et dynamique ✅ un accompagnement réel dans votre évolution ✅ une aventure humaine où l’on construit ensemble, depuis 2016, une équipe solide et passionnée.

Voir toutes les offres de AVA2I

Publié par

Recruteur
Recruteur

Intéressé par cette offre ?

Cliquez sur "Postuler" pour accéder à l'offre.