Quelle politique d'éviction pour un cache LLM ? Une étude systématique

L'étude compare FIFO, LRU, LFU, ARC, GDSF et d'autres politiques d'éviction pour caches sémantiques LLM sur trois corpus et deux encodeurs. LFU s'impose comme référence simple, aucune politique ne le surpassant de plus de 0,041 point. Un audit plus large révèle un problème majeur : au seuil médian de MiniLM, seulement 2,1 à 3,9% des hits sont réellement substituables, ramenant des taux de hit bruts de 51-60% à des taux ajustés de 1,1-2,2%.