# Supersede: Diagnosing and Training the Memory-Update Gap in LLM Agents
> Ficha editorial pública de Research IA. Estado: Lectura primaria completa. La interpretación editorial no sustituye la fuente primaria.

- Página canónica: https://luiseduardodemiguel.com/research-ia/papers/supersede-diagnosing-and-training-the-memory-update-gap-in-llm-agents
- Fuente primaria: https://arxiv.org/abs/2606.27472
- Versión leída: v1
- Fuente comprobada: 2026-08-19 · lectura primaria completa; extracción editorial automatizada, revisión humana pendiente
- Autores: Vedant Patel
- Fecha del corte: 25 JUNIO 2026.
- Área: MEMORIA · AGENTES

## Tesis y contexto

Aísla un fallo crítico de los agentes con memoria: cuando un dato cambia, el agente conserva información obsoleta y responde con valores antiguos. En LongMemEval, sustituir contexto completo por memoria autogestionada baja la precisión de 92% a 77%, y el problema empeora al crecer la conversación. Propone un entorno RL abierto para entrenar agentes a priorizar hechos vigentes frente a hechos superseded.

- Problema: Memoria persistente que no sabe actualizarse.
- Por qué importa: Esto es clave para asistentes personales, CRM y agentes empresariales reales.

## Evidencia reportada

- **reported-result**: For gpt-4.1-mini, accuracy falls from 82\% to 63\% : the paired test counts 19 questions full-context answers correctly but bounded-memory does not, against only 4 in reverse ( p=0.0035 ). [localizador](https://arxiv.org/html/2606.27472#S5)
- **reported-result**: At a fixed 300 -character memory, lengthening the conversation from \sim 2 to \sim 48 sessions drops accuracy from 68\% to 28\% (paired McNemar p=0.002 ), a 40 -point fall driven by relevant facts being squeezed out or overwritten by stale ones across the longer history. [localizador](https://arxiv.org/html/2606.27472#S5)
- **reported-result**: The environment thus faithfully reproduces the failure it is designed to train against. [localizador](https://arxiv.org/html/2606.27472#S5)
- **reported-result**: 7/78 correct), a +7.7 -point ( +86\% relative) gain that nearly doubles the untrained baseline (a single run; see Section 7 ). [localizador](https://arxiv.org/html/2606.27472#S5)

## Lectura y límite

- Método: La lectura de 2 Related Work describe la intervención y su construcción: LoCoMo ( Maharana et al. 2024 ) evaluates very long multi-session dialogue but does not annotate a dedicated update category. LongMemEval ( Wu et al. 2025 ) introduces an explicit knowledge-update question type in which a fact stated in one session is changed in a later one; we adopt this subset as ground truth. MemoryArena ( He et al. 2026 ) shows that models near-perfect on recall benchmarks drop sharply when memory must drive actions, motivating evaluation beyond passive recall. MemoryAgentBench ( Hu et al. 2025 ) and MemBench ( Tan et al. 2025 ) add knowledge-updating and conflict-resolution competencies.…
- Límite: La lectura primaria permite comprobar método y resultados en el HTML, pero no convierte sus conclusiones en validación independiente. La ficha no demuestra transferencia fuera de los datasets, modelos, herramientas y condiciones descritos en 5 Results.
- Confianza editorial: Media
- Limitación: El cierre de la fuente señala: The results reframe supersession from a comprehension problem to a memory-policy problem. Stronger models read updated context well, but when they must decide what to keep under a bounded memory, they discard or fail to overwrite the value that later matters. This is precisely the regime that production memory systems operate in, and precisely where a heuristic update / delete policy ( Chhikara et al. 2025 ) is brittle. Our two scaling axes rule out the…
- Limitación: La ficha no demuestra transferencia fuera de los datasets, modelos, herramientas y condiciones descritos en 5 Results.

## Localizadores de evidencia
- [Fuente primaria · canonical](https://arxiv.org/abs/2606.27472): tipo abstract
- [HTML · lectura completa](https://arxiv.org/html/2606.27472): tipo abstract
- [Método · 2 Related Work](https://arxiv.org/html/2606.27472#S2): tipo section
- [Evaluación · 5 Results](https://arxiv.org/html/2606.27472#S5): tipo section
- [Cierre · 6 Discussion](https://arxiv.org/html/2606.27472#S6): tipo section

## Próxima prueba

- ¿La propuesta mejora memoria de clientes frente a la línea base actual?
- Métrica: Comparar la métrica principal de la fuente junto con calidad, coste, latencia y tasa de errores.
- Regla de parada: Parar si no aparece una mejora reproducible o si aumenta el riesgo, la complejidad o el coste sin compensación.

## Recursos reproducibles
- [Code & Environment](https://github.com/Vrin-cloud/supersede)
- [Model & Data](https://huggingface.co/vedant33/supersede-qwen2.5-3b-grpo-lora)
- [https://huggingface.co/datasets/vedant33/supersede-rl-episodes](https://huggingface.co/datasets/vedant33/supersede-rl-episodes)
- [https://huggingface.co/blog/openenv-agentic-rl](https://huggingface.co/blog/openenv-agentic-rl)

## Enlaces relacionados

- [CoEvo-Mem](https://luiseduardodemiguel.com/research-ia/markdown/papers/coevo-mem)
- [Agent Memory Distillation](https://luiseduardodemiguel.com/research-ia/markdown/papers/agent-memory-distillation)
- [LiveMem](https://luiseduardodemiguel.com/research-ia/markdown/papers/livemem)