Data Engineering Talend / Starburst Senior
Salaire du marché
Cette offre n'affiche pas de salaire. D'après 39 offres pour ce poste (Senior, Île-de-France), le marché se situe autour de 475€/j (445€/j–550€/j).
Description du poste
Le bénéficiaire souhaite une prestation d’accompagnement dans l’objectif d’assurer une mission dans le cadre de notre transition vers une architecture Data Mesh. Nous recherchons un(e) Data Product Engineer spécialisé(e) dans le développement de pipelines sur la plateforme Talend Real Time BigData et de data products sur la plateforme Starburst. Votre mission sera de concevoir, collecter, intégrer, construire et opérer des jeux de données fiables, auto-descriptifs et interopérables, en collaboration avec les domain métiers et les data owners.
Missions clés :
- Conception de flux de données et de Data Products
Développement des pipelines d'intégration de données optimisés via la Talend Data Fabric / Talend Real Time BigData ou encore Spark / Astronomer
Documentation des pipelines d'ingestion de données
Intégration des données dans l’écosystème Data Mesh
Collaboration avec les domaines métiers pour identifier les sources de données et les cas d’usage.
Développement des data products / data sets (vues & vues matérialisées) répondant à des cas d'usage identifiées avec les responsables de domaines métiers
Développement des requêtes SQL optimisées pour Starburst (push-down predicates, partitionnement, formats de fichiers comme Iceberg/Parquet).
Documentation les data products (métadonnées, ownership, qualité)
Contribution à l’amélioration continue des data produts dans de la plateforme Starburst
Mise en place des alertes et des dashboards pour le suivi des data products.
Exigences du poste
Stack technique :
Plan d'action
Un plan personnalisé pour postuler intelligemment à cette offre.
À propos de l'entreprise
VISIAN, filiale d'un grand groupe technologique de plus de 6500 personnes, est une société de conseil spécialisée dans l'innovation, la conception de produits et la data. Ses consultants technophiles allient compréhension des enjeux digitaux et vision produit. De la structuration des DSI à la conception de produits digitaux en passant par la valorisation de la data, VISIAN concrétise les objectifs de ses clients en faisant converger ambition et faisabilité. Fondée par des consultants, VISIAN connait une croissance rapide pour atteindre 14 millions de CA cette année et renforce ses partenariats avec de nombreux clients grands-comptes sur Paris et Marseille.
Voir toutes les offres de VisianPublié par
Intéressé par cette offre ?
Cliquez sur "Postuler" pour accéder à l'offre.