The official repo of the paper: $delta$-mem: Efficient Online Memory for Large Language Models

LLM OrchestrationOpen Source AI & Machine LearningOpen Source

About

δ-mem introduce un estado compacto de memoria asociativa en línea junto a una estructura de atención completa congelada. Cuando llega un nuevo token o segmento de interacción, el modelo proyecta la información actual en un espacio de memoria de baja dimensión y la escribe en el estado a través del aprendizaje de la regla delta.

Open Source Health

Not enough history
Stars
257
Forks
26
License
Not stated
Last commit
4 months ago
Python

Resources & Links

Related Categories

¿Usas delta-Mem?

Controla su coste junto al resto de tu stack y recibe un recordatorio antes de que se renueve.

Añadir a mi stack

Vendor

Deep Cognition and Language Research (DeCLaRe) Lab

Open-source projects on GitHub: Conv Emotion, Tango and MELD

View vendor profile

More by Deep Cognition and Language Research (DeCLaRe) Lab