Ingénieur IA - Llmops H/F

Les missions du poste

L'approche de Starclay au sein du Groupe Partenor se caractérise par une double compétence Métier et SI ; mettre les utilisateurs au centre de tous les projets depuis la formalisation des besoins jusqu'à la formation de ces derniers.

Nous nous positionnons en tant qu'acteur clé dans les dispositifs d'amélioration continue notamment à travers l'IA générative.



Dans le cadre d'un renfort chez l'un de nos clients grands comptes dans le secteur bancaire, nous recherchons un(e) data scientist confirmé.

Votre mission :
Terminer l'application de monitoring des agents :
- Ajouter fonctionnalité d'évaluation offline à partir d'un dataset / test de différentes versions d'un même prompt
- Ajouter la possibilité de mettre à jour un dataset avec de nouvelles traces la version/le prompt system utilisé dans la trace afin d'alimenter le data set d'évaluation avec des cas de production
- Ajouter fonctionnalité d'évaluation offline à partir d'un dataset / test de différentes versions d'un même agent (diff de modèle / archi / autre)
- Intégration des feedbacks utilisateurs
- Ajouter prompt système + tokens + modèles dans les traces
-Conteneuriser l'application permettant de monitorer les agents et déploiement dans l'artifactory
-Tester l'application de monitoring conteneurisée avec un volume partagé entre l'application de monitoring et l'application à monitorer
-Implémenter / entrainer des modèles de jailbreak/ injection prompt en francais et les intégrer dans les applications métier (et les faire apparaitre dans l'app de monitoring)
-Implémenter le template ESG et effectuer les tests de leurs documents dans l'application
-Implémenter les fonctionnalités suivantes de la direction des investissements
-Implémenter une fonction de recherche web dans l'application (Priorité moindre)
Segmentation et moteur de reco :
- Terminer la pipeline de segmentation dans dataiku : de concert avec l'équipe BI pouvoir porter la segmentation dans dataiku et créer la base du moteur de recommandation

Machine learning/System Design :
-Conseil ou suivi des usages ponctuels internes par des métiers, à spectre restreint et/ ou suivi et conseil à apporter à des métiers achetant des solutions proposées par des prestataires qui nécessitent une expertise limitée ,avec des exigences bien définie et documentée : POV Formation IA, POV URL LAB, Dévolution successorale et autres à venir (prévoyance)

Le profil recherché

Issu d'une formation Bac +5, vous justifiez d'au moins 6 ans d'expérience en tant que data science AI.Profil à dominante ML avec une bonne connaissance de la conteneurisation/ dev ops et des pratiques de software engineering (back or front) est demandé

Bienvenue chez StarClay

L'approche de Starclay au sein du Groupe Partenor se caractérise par une double compétence Métier et SI ; mettre les utilisateurs au centre de tous les projets depuis la formalisation des besoins jusqu'à la formation de ces derniers.Nous nous positionnons en tant qu'acteur clé dans les dispositifs d'amélioration continue notamment à travers l'IA générative.