RECHERCHE
Mémoire structurée pour LLM Edge : injection O(1)
PRECOG et SMC exploitent les SSMs pour un RAG en O(1), éliminant le coût de prefill des Transformers.
arXiv cs.AI · cs.LG · cs.CL·Anusha Madan Gopal, Aras Pirbadian, Kristofor D. Carlson, M Anthony Lewis·3 août 2026
Image · Source originale
PRECOG est un mécanisme de retrieval pour State-Space Models qui pré-encode les corpus en états cachés, permettant une injection en O(1) et bypassant le re-ingestion contextuelle. Couplé à SMC pour la mémoire persistante, il réduit la latence de prefill de 27 s à < 6 ms sur un modèle 1.2B.
Chaleur 0
Pertinence 80
Nouveauté 85