Expert IA Générative / Data Scientist (H/F)
Role details
Job location
Tech stack
Job description
Réaliser le fine-tuning de modèles de langage open source (LLM/SLM) sur des jeux de données spécialisés.
Concevoir et mettre en ?uvre des stratégies d'alignement des modèles afin d'améliorer la qualité des réponses et de réduire les hallucinations à l'aide de techniques de Reinforcement Learning (DPO, PPO, GRPO...).
Structurer, préparer et formater les données d'entraînement selon les meilleures pratiques (ChatML, Alpaca, etc.).
Développer des pipelines d'évaluation et de benchmarking permettant de mesurer les performances des modèles à l'aide de benchmarks de référence (MMLU, GSM8K, LLM-as-a-Judge...).
Collaborer avec les équipes métier et techniques afin de concevoir des solutions IA robustes, performantes et adaptées aux besoins opérationnels.
Requirements
Expertise en fine-tuning de LLM avec LoRA, QLoRA et frameworks tels que TRL, Unsloth ou Axolotl.
Maîtrise des techniques d'alignement et de Reinforcement Learning appliquées aux modèles de langage.
Solides compétences en Python et PyTorch.
Expérience des méthodologies d'évaluation des modèles d'IA générative.
Connaissance des environnements MLOps et des outils de déploiement (Hugging Face Hub, vLLM, Ollama, Triton) appréciée.
Une sensibilité aux problématiques de cybersécurité constitue un atout., Data Scientist / Expert IA Générative confirmé.
Excellentes capacités d'analyse, de communication et de vulgarisation.
Rigueur scientifique, autonomie et aptitude à évoluer dans un environnement agile orienté R&D.
Maîtrise du français et de l'anglais professionnel.