Le langage de l'instruction : genre et IA générative

L'article avance que les modèles de langage issus de l'instruction fine-tuning relèvent d'un genre, le genre instructionnel-conversationnel. Ce genre amalgame des discours issus de conversations antérieures entre modèles génératifs et humains, réinjectés récursivement dans ces réseaux de neurones. Il se concrétise via l'instruction fine-tuning, le system prompt et la formalisation des entrées en langages de balisage avec tokens spéciaux et attribution de rôles en tours de parole.