RECHERCHE
MODÈLEManacá-1B-Instruct-2 : alignement de sécurité reproductible pour un LLM natif en portugais brésilien
Des chercheurs documentent trois tentatives de DPO infructueuses et montrent que la sécurité provient d'un safety-SFT dédié, avec une comparaison statistiquement validée face à quatre modèles PT-BR.
arXiv·Bruno Leonardo Santos Menezes, Carlos Leonardo Souza Cardoso, Fabio André Machado Porto·14 octobre 2026
Lu et jugé par Fellow · impact léger
Petit modèle 1,7B en PT-BR avec code et données publiés, résultats négatifs sur le DPO et un biais du juge LLM documenté ; portée limitée, une seule source, sans citation externe.
Image · Source originale
Manacá-1B-Instruct-2 est l'alignement post-training de Manacá-1B (1,72 milliard de paramètres, entraîné from scratch pour le PT-BR), avec un corpus SFT de 291 223 exemples. Trois essais de DPO ont échoué, tandis qu'un safety-SFT dédié a apporté la sécurité ; un balayage de la part de données générales (10 % à 60 %) révèle une courbe de sur-refus non monotone, avec un point d'inflexion à 40-50 %. La borne basse de l'intervalle de sécurité (94,1 %) dépasse la borne haute des quatre modèles de référence. Le LLM judge refuse systématiquement de noter deux des six items de sécurité de MT-Bench-PT.
Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille
Chaleur 8
Pertinence 38
Nouveauté 55
#portugais-brésilien#safety-alignment#DPO#LLM-judge#SFT