Stage - Pentester Evaluation LLM F/H

Description de l'entité/équipe

Description de l'entité/équipe

La sécurité est au cœur de la stratégie d’Orange. C’est un maillon indispensable à son rôle d’opérateur de confiance et un véritable enjeu business face à la multiplication des menaces. 

La Direction de la Sécurité assure la sécurité et la résilience pour l’ensemble du Groupe qui englobe la sécurité de l’information, informatique et des réseaux, la sécurité physique-sûreté-incendie, la gestion de crise, la continuité d’activité, la veille et l’intelligence économique. 

Au sein de la direction Sécurité, vous intégrez l’équipe Security Audits and Risks Assessment dont la mission consiste notamment à évaluer et contrôler la sécurité du groupe Orange à travers des audits techniques (pentests).

Description de la mission et des activités

Sujet du stage : Évaluation et optimisation de LLM locaux pour l’assistance aux activités de pentest

Au sein de l’équipe Pentest d’Orange, vous contribuerez à explorer les apports des modèles de langage (LLM) dans le cadre de tests de sécurité réalisés dans des environnements autorisés et contrôlés.

L’objectif du stage est de mettre en place et d’optimiser un environnement de pentest assisté par IA, s’appuyant sur des LLM exécutés localement. Le travail portera notamment sur l’évaluation de différents modèles, l’analyse de leurs capacités et l’identification des usages pertinents pour les activités de l’équipe.

Missions

Accompagné(e) par les membres de l’équipe, vous serez amené(e) à :

• concevoir et mettre en place un environnement de test pour l’utilisation de LLM locaux dans des scénarios de pentest encadrés
• définir des cas d’usage et des protocoles de benchmark permettant de comparer l’efficacité des modèles
• évaluer les résultats selon des critères adaptés : pertinence, fiabilité, reproductibilité, temps de réponse et ressources nécessaires
• effectuer une veille sur les nouveaux modèles et outils, puis sélectionner et tester ceux qui présentent un intérêt pour l’équipe ;

  exploiter une machine dédiée équipée d’un GPU NVIDIA pour faire tourner les modèles localement

• documenter les expérimentations, leurs limites et les recommandations d’utilisation

Les essais seront réalisés dans un cadre autorisé, sur des environnements et des données définis avec l’équipe.

Environnement technique 

Selon les sujets retenus, le stage pourra mobiliser des LLM open source, des outils d’inférence locale, des scripts d’automatisation et des environnements de test de sécurité. Une machine dédiée équipée d’un GPU NVIDIA sera mise à disposition pour l’exécution des modèles.

Profil recherché externe/compétences

Votre profil : 

• Etudiant(e) de niveau bac+5 en cybersécurité, informatique ou intelligence artificielle, et vous vous intéressez à la fois aux tests d’intrusion et aux modèles de langage.

Vous disposez idéalement de connaissances en :

• sécurité offensive et méthodologie de pentest
• Python et scripting
• fonctionnement général des LLM et de l’IA générative
• environnements Linux et outils de développement.

La curiosité, la rigueur expérimentale, l’esprit critique et la capacité à documenter clairement les résultats seront des qualités importantes.

Le stage demande un bon niveau d’autonomie : le ou la stagiaire devra être capable d’organiser ses expérimentations, de suivre les évolutions du domaine et de faire preuve de force de proposition (cas d’usage / axes d’amélioration). Il ou elle sera accompagné(e) par l’équipe tout au long du stage.

Le plus de l'offre/perspectives

Le plus de l'offre/perspectives

Ce stage vous permettra d’expérimenter des LLM locaux sur des cas d’usage concrets de cybersécurité, de construire une démarche de benchmark et de contribuer à l’évaluation de nouvelles approches au sein d’une équipe spécialisée en pentest.

L'indemnité mensuelle brute de stage proposée est comprise entre 1306,91 et 1680,32 euros selon votre niveau d'études en cours. 

À cela s’ajoutent l’accès aux activités sociales et culturelles proposées par votre comité social et économique , l’accès au restaurant d’entreprise ou aux titres-restaurant, ainsi que la prise en charge à hauteur de 50 % de votre abonnement au transport en commun.