CreativeInstruct : équilibrer qualité et créativité des LLMs
Une méthode d'instruction-tuning introduit des tokens pour injecter de la créativité sans perte de qualité ni diversité.
arXiv cs.AI · cs.LG · cs.CL·Ananya Sahu, Mohit Bansal, Elias Stengel-Eskin·7 août 2026

Image · Source originale
CreativeInstruct est une méthode d'instruction-tuning qui permet aux LLMs de concilier la qualité du post-training avec la créativité des modèles de base via l'injection de spans spéciaux. Elle surpasse les benchmarks en diversité narrative, confirmée par l'évaluation humaine, et améliore les performances du RL (GRPO) sur les tâches AMC et MATH.