Basé sur 18 offres pour ce poste (Senior, Île-de-France, 3 dernières semaines). Fourchette habituelle 45k€–65k€, médiane 55k€. Cette offre (48k€) est dans la fourchette.
Un grand groupe du secteur de la distribution nous confie la conception, l'industrialisation et l'évolution d'une plateforme d'analyse conversationnelle alimentée par des modèles de langage (LLM). Cette solution, déployée en production, sert à accompagner les équipes métier dans leur accès aux données et la prise de décision via un agent analytique intelligent.
Vous rejoignez une équipe responsable de trois volets stratégiques : l'évaluation et le monitoring de la qualité des réponses (LLM-as-a-Judge), la maintenance et la fiabilité de la plateforme en production, ainsi que les analyses approfondies du comportement de l'agent pour identifier les axes d'amélioration. L'environnement technique repose sur Google Cloud Platform (Agent Platform, Cloud Run), des frameworks d'orchestration multi-agents (LangChain, LangGraph) et des outils de développement Python modernes (FastAPI, Pandas, NumPy). Vous travaillerez en méthodologie Agile, en étroite collaboration avec les équipes métier et les data scientists, dans une démarche d'amélioration continue et de rigueur qualité.
Responsabilités :
- Concevoir, maintenir et documenter le framework d'évaluation LLM-as-a-Judge, incluant la définition des métriques, la construction de jeux de test et l'établissement des seuils de qualité
- Assurer la maintenance corrective et évolutive de l'agent en production : diagnostiquer et corriger les anomalies, intégrer les mises à jour des composants, gérer les déploiements sécurisés
- Réaliser des analyses LLM avancées pour approfondir la compréhension du comportement de l'agent, identifier les dégradations et proposer des recommandations d'amélioration
- Concevoir et optimiser des workflows multi-agents et protocoles Agent-to-Agent (A2A/ACUI) pour assurer l'interopérabilité et la robustesse
- Parser et structurer des données non structurées (PDF, images, tableaux) pour enrichir le contexte d'analyse
- Collaborer activement avec les équipes métier et les pairs pour valider les évolutions et partager les connaissances
- Veiller au respect des délais tout en maintenant des standards élevés de qualité et de performance
Un plan personnalisé pour postuler intelligemment à cette offre.
Signe + en quelques mots : Spécialiste en intermédiation sur le marché IT, SAP, Data BI, Cyber nous intervenons en France comme à l’étranger en sous-traitance, recrutement et également en portage salarial, portage commercial ou portage de formation Qualiopi. Signe + crée de manière équilibrée de la valeur pour toutes les parties prenantes en s’appuyant sur une connaissance dynamique du marché avec une plateforme évolutive de plus de 150 000 profils. Depuis 2005, nous accompagnons nos clients avec nos valeurs : ✔ Expertise et professionalisme ✔ Agilité et Innovation ✔ Transparence et éthique ✔ Proximité et accessibilité
Voir toutes les offres de Signe +Cliquez sur "Postuler" pour accéder à l'offre.