Expert IA / LLM – Fine-Tuning & Alignement SOC – Toulouse

Nous recherchons pour le compte de notre client dans le domaine de la cybersécurité, un Expert IA spécialisé dans l'entraînement, l'alignement et l'évaluation de modèles de langage (LLM/SLM) appliqués au SOC.

L'environnement technique est le suivant : LLM (Llama, Mistral, Qwen), LoRA, QLoRA, Unsloth, Axolotl, TRL, DPO, GRPO, PPO, ChatML, Alpaca, MMLU, Python, PyTorch, Hugging Face, vLLM, Ollama.

Contexte :
Au sein d'un SOC intégrant des technologies d'IA générative, vous travaillez en collaboration directe avec l'équipe R&D Cyber pour concevoir des modèles souverains ultra-spécialisés en cybersécurité. L'objectif est d'automatiser l'analyse de menaces, de contextualiser les alertes de sécurité et d'assister les analystes SOC grâce à des LLM/SLM entraînés et alignés sur des données cyber.

Missions :

• Adapter et spécialiser des LLM open-source (Llama, Mistral, Qwen) sur des données de cybersécurité (logs, rapports CTI, playbooks) via des techniques de fine-tuning PEFT (LoRA, QLoRA)

• Mettre en œuvre des techniques d'alignement et de Reinforcement Learning (DPO, GRPO, PPO) pour garantir des réponses précises, sécurisées et sans hallucinations

• Définir et appliquer les meilleurs formats de prompt et de conversation pour l'entraînement (ChatML, Alpaca)

• Concevoir et déployer des pipelines d'évaluation rigoureux pour mesurer la performance des modèles cyber (MMLU, GSM8K, LLM-as-a-judge, Evaluation Arena)

• Collaborer étroitement avec les équipes SOC et R&D Cyber pour vulgariser les concepts IA auprès des analystes et RSSI