# LongMedBench: Medical Agents for Long-Horizon Clinical Decision-Making
> Ficha editorial pública de Research IA. Estado: Lectura primaria completa. La interpretación editorial no sustituye la fuente primaria.

- Página canónica: https://luiseduardodemiguel.com/research-ia/papers/longmedbench-medical-agents-for-long-horizon-clinical-decision-making
- Fuente primaria: https://arxiv.org/html/2607.09322v1
- Versión leída: v2
- Fuente comprobada: 2026-08-19 · lectura primaria completa; extracción editorial automatizada, revisión humana pendiente
- Autores: Zihan Xu, Yanzhen Chen, Xiaocheng Zhang, Zhiting Fan, Weiqi Zhai, Hongxia Xu, Zuozhu Liu
- Fecha del corte: 10 JULIO 2026.
- Área: AGENTES · EVALUACIÓN

## Tesis y contexto

Benchmark clínico longitudinal construido con historiales de MIMIC-IV. Simula interacciones multi-sesión y evalúa recuperación factual, razonamiento temporal y decisiones médicas acumuladas a lo largo de múltiples visitas.

- Problema: Los benchmarks médicos suelen reducir la asistencia clínica a preguntas cortas o episodios aislados.
- Por qué importa: Los resultados muestran que RAG y memoria ayudan a recuperar información, pero las decisiones clínicas siguen dependiendo en gran medida del contexto inmediato. Eso limita el uso seguro de agentes como gestores longitudinales del paciente.

## Evidencia reportada

- **reported-result**: , m\in\{1,2,3\} in \mathcal{M}_{E} ) and full history ( m=\infty ) against the Agent Memory system (Mem0). [localizador](https://arxiv.org/html/2607.09322#S3)
- **reported-result**: Table 2 reveals that naive-LLM’s performance decays severely as history grows , dropping from 0.882 to 0.423 in explicit retrieval, with low Lab-F scores ( \leq 0.570) highlighting a pervasive hallucination bias. [localizador](https://arxiv.org/html/2607.09322#S3)
- **reported-result**: The performance of agent memory system is strongly correlated with the specific task type ; while Mem0 achieves near-optimal results in explicit Lab-T (0.993) and Medication (0.983), its relative performance (Overall 0.331) remains inferior. [localizador](https://arxiv.org/html/2607.09322#S3)
- **reported-result**: This gap reveals that: first, agents struggle to generate precise queries for imaging reports even with few-shot prompting; interestingly, when falling back to vector-based search, relative semantic queries outperform explicit ID/timestamp matching, as the latter lacks sufficient embedding density in vector space; second, the agent’s memory architecture lacks a systematic indexing of relationships between events. [localizador](https://arxiv.org/html/2607.09322#S3)

## Lectura y límite

- Método: La lectura de 2 Methodology describe la intervención y su construcción: LongMedBench is built on MIMIC-IV [ 7 ] , a public database that contains medical records for >100,000 patients. To convert static EHRs into an interactive agent environment, we design a three-stage pipeline (Figure 1 ). To reduce redundancy while preserving clinical signals, we retain only abnormal lab results and patients with complete admission/discharge records. Filtering for patients with \geq 15 hospitalizations yields 355 patients and 6,999 visits. With an average of 19.72 visits per patient (median=18.00, SD=5.72), this dense multi-session structure rigorously evaluates the agent’s ability in…
- Límite: La lectura primaria permite comprobar método y resultados en el HTML, pero no convierte sus conclusiones en validación independiente. La ficha no demuestra transferencia fuera de los datasets, modelos, herramientas y condiciones descritos en 3 Experiments and Results.
- Confianza editorial: Media
- Limitación: El cierre de la fuente señala: We introduce LongMedBench, a benchmark using real-world EHR data to evaluate medical agents in long-horizon clinical reasoning. By converting MIMIC-IV records into multi-session event streams, we assess agents across three memory types with varying tasks. Experiments reveal that while state-of-the-art models handle explicit timestamps well, implicit temporal reasoning remains a significant bottleneck. As history scales, models increasingly rely on…
- Limitación: La ficha no demuestra transferencia fuera de los datasets, modelos, herramientas y condiciones descritos en 3 Experiments and Results.

## Localizadores de evidencia
- [Fuente primaria · canonical](https://arxiv.org/html/2607.09322v1): tipo abstract
- [HTML · lectura completa](https://arxiv.org/html/2607.09322): tipo abstract
- [Método · 2 Methodology](https://arxiv.org/html/2607.09322#S2): tipo section
- [Evaluación · 3 Experiments and Results](https://arxiv.org/html/2607.09322#S3): tipo section
- [Cierre · 4 Conclusion](https://arxiv.org/html/2607.09322#S4): tipo section
- [HTML · fuente navegable](https://arxiv.org/abs/2607.09322v1): tipo abstract

## Próxima prueba

- ¿La propuesta mejora soporte clínico frente a la línea base actual?
- Métrica: Comparar la métrica principal de la fuente junto con calidad, coste, latencia y tasa de errores.
- Regla de parada: Parar si no aparece una mejora reproducible o si aumenta el riesgo, la complejidad o el coste sin compensación.

## Recursos reproducibles
- [the following issues](https://github.com/arXiv/html_feedback/issues)
- [list of packages that need conversion](https://github.com/brucemiller/LaTeXML/wiki/Porting-LaTeX-packages-for-LaTeXML)
- [developer contributions](https://github.com/brucemiller/LaTeXML/issues)

## Enlaces relacionados

- [VAKRA](https://luiseduardodemiguel.com/research-ia/markdown/papers/vakra)
- [The Devil Is in the Interface](https://luiseduardodemiguel.com/research-ia/markdown/papers/devil-interface)
- [SkillSentry](https://luiseduardodemiguel.com/research-ia/markdown/papers/skillsentry)