CritICL : généraliser du faible vers le fort à partir des erreurs de petits modèles

CritICL part du constat que les modes d'échec des LLM suivent des motifs structurés au sein d'une même famille de modèles. Plutôt que de les ignorer, la méthode les transforme en exemples critiques utilisés en in-context learning, via deux variantes (dynamique ou statique). Les résultats montrent des performances comparables ou supérieures aux méthodes de test-time scaling, avec beaucoup moins de générations et un coût en tokens réduit.