> Markdown version of [/jobs/ext/1573784-data-scientist-expert-ia-specialiste-llm-et-alignement-cyber-f-h](https://www.wearedevelopers.com/jobs/ext/1573784-data-scientist-expert-ia-specialiste-llm-et-alignement-cyber-f-h). Every page supports `.md` or `Accept: text/markdown`. Links point to the HTML versions so they work for humans too. Agent guide: [/agents.md](https://www.wearedevelopers.com/agents.md). --- # Data Scientist / Expert IA - Spécialiste LLM et Alignement Cyber F/H - **Company:** CTS Consulting & Technical Support - **Location:** Toulouse, France - **Experience:** Expert - **Contract:** Permanent contract - **Skills:** Cyber Security, Python (Programming Language), Log Analysis, Reinforcement Learning, Pytorch, Large Language Models, Mitre Att&ck, HuggingFace, Machine Learning Operations - **Published:** July 5, 2026 - **Apply:** https://fr.indeed.com/viewjob?jk=230a9fd695e57f6a ## About the Role Chargement du profil en cours ... Vous justifiez d'une expérience confirmée et d'une maîtrise pointue des concepts avancés liés aux architectures de Transformers : - Fine-Tuning : Maîtrise avancée des techniques d'adaptation à faible rang (LoRA, QLoRA) et pratique courante d'au moins un framework de fine-tuning rapide (Unsloth, Axolotl ou TRL d'Hugging Face). - Structuration Data : Expertise validée dans l'utilisation des formats de templates de discussion, notamment ChatML et Alpaca. - Alignement & Reinforcement Learning : Solide expérience de l'optimisation via les méthodes DPO (Direct Preference Optimization), GRPO (Group Relative Policy Optimization) ou PPO. Maîtrise des frameworks associés (TRL, verl ou OpenRLHF). - Benchmarking : Capacité à utiliser des benchmarks standards (MMLU, GSM8K) et à mettre en place des méthodologies de pointe de type Evaluation Arena (LMSYS) ou LLM-as-a-judge. - Langues : Maîtrise courante du français et niveau d'anglais professionnel impératifs. Compétences secondaires appréciées (Nice to have) : - Stack MLOps & Dev : Excellente maîtrise de Python et PyTorch, ainsi que des plateformes d'inférence optimisée comme vLLM, Ollama, Triton ou Hugging Face Hub. - Sensibilité Cybersécurité : Un intérêt marqué ou une première expérience sur des problématiques SOC (MITRE ATT&CK, analyse de logs, détection d'intrusions) facilitera grandement les échanges avec le métier. Toulouse IT ## Description des datasets textuels verticaux en cybersécurité (logs de production, rapports CTI, playbooks de remédiation). - Alignement et Contrôle des Hallucinations : Mettre en oeuvre des techniques d'apprentissage par renforcement pour optimiser les réponses (Constraint-based generation). L'enjeu est de garantir des restitutions précises, sécurisées et sans biais, un aspect crucial pour la confiance opérationnelle du SOC. - Formatage et Structuration des Données : Sélectionner, collecter et redresser les sources de données pertinentes. Définir les meilleurs formats de prompt et de conversation pour structurer les datasets d'entraînement. - Évaluation et Benchmarking : Concevoir des protocoles d'évaluation internes rigoureux et des pipelines comparatifs pour mesurer l'apport et la pertinence des modèles spécialisés « Cyber » par rapport aux standards du marché. ## Related Videos - [Unlocking the Power of AI: Accessible Language Model Tuning for All](https://www.wearedevelopers.com/videos/951-unlocking-the-power-of-ai-accessible-language-model-tuning-for-all) - [Photonic Computing: Programming a New Class of AI Accelerators (incl. Live Coding)](https://www.wearedevelopers.com/videos/100196-photonic-computing-programming-a-new-class-of-ai-accelerators-incl-live-coding) - [Progressive Delivery in Kubernetes](https://www.wearedevelopers.com/videos/949-progressive-delivery-in-kubernetes) - [Geometric deep learning for drug discovery](https://www.wearedevelopers.com/videos/264-geometric-deep-learning-for-drug-discovery) - [Adding knowledge to open-source LLMs](https://www.wearedevelopers.com/videos/1522-adding-knowledge-to-open-source-llms) - [Serverless deployment of (large) NLP models ](https://www.wearedevelopers.com/videos/158-serverless-deployment-of-large-nlp-models) ## Related Articles - [What Are Large Language Models?](https://www.wearedevelopers.com/magazine/304-what-are-large-language-models) - [Why Upskilling And Reskilling is Important For Developers](https://www.wearedevelopers.com/magazine/428-why-upskilling-and-reskilling-is-important-for-developers) - [Best Coding Boot Camps in Germany](https://www.wearedevelopers.com/magazine/237-best-coding-boot-camps-in-germany) - [Dev Digest 120 - Apple and peers](https://www.wearedevelopers.com/magazine/455-dev-digest-120-apple-and-peers) - [Dev Digest 134 - Where pixels sing?](https://www.wearedevelopers.com/magazine/477-dev-digest-134-where-pixels-sing) - [MLops – Deploying, Maintaining And Evolving Machine Learning Models in Production](https://www.wearedevelopers.com/magazine/115-mlops-deploying-maintaining-and-evolving-machine-learning-models-in-production)