# EvoPolicyGym: Evaluating Autonomous Policy Evolution in Interactive Environments
> Ficha editorial pública de Research IA. Estado: Lectura primaria completa. La interpretación editorial no sustituye la fuente primaria.

- Página canónica: https://luiseduardodemiguel.com/research-ia/papers/evopolicygym-evaluating-autonomous-policy-evolution-in-interactive-envir
- Fuente primaria: https://arxiv.org/abs/2607.02440
- Versión leída: v1
- Fuente comprobada: 2026-08-19 · lectura primaria completa; extracción editorial automatizada, revisión humana pendiente
- Autores: Zhilin Wang, Han Song, Runzhe Zhan, Jusen Du, Jiacheng Chen, Tianle Li, Qingyu Yin, Yulun Wu, Zhennan Shen, Tong Zhu, Yanshu Li, Guanjie Chen, Derek F. Wong, Yafu Li, Yu Cheng, Yang Yang
- Fecha del corte: 2 JULIO 2026.
- Área: AGENTES · EVALUACIÓN · SEGURIDAD
- Recurso MCP exacto: research://paper/evopolicygym-evaluating-autonomous-policy-evolution-in-interactive-envir

## Estado de uso de imagen

- Estado: NO REPRODUCIDA
- Decisión editorial: La ficha no incrusta una figura primaria porque su licencia o permiso específico no consta en el registro editorial. La fuente permanece enlazada para comprobarla.
- [Comprobar fuente primaria](https://arxiv.org/abs/2607.02440)

## Tesis y contexto

Benchmark para evaluar cómo agentes modifican políticas ejecutables bajo feedback e interacción acotada. Mide no solo resultado final, sino cómo el agente usa presupuesto, feedback y mecanismos de mejora.

- Problema: Muchos benchmarks no separan “saber resolver” de “saber mejorar una política”.
- Por qué importa: Acerca la evaluación a agentes que iteran prompts, reglas, scripts o estrategias.

## Evidencia reportada

- **reported-result**: MiniMax-M3 and DeepSeek-V4-Pro each win one environment, but their aggregate scores remain substantially lower. [localizador](https://arxiv.org/html/2607.02440#S4)
- **reported-result**: MiniMax-M3 wins HalfCheetah and reaches the top two on Parking and FetchPickAndPlace, yet its weaker Gym / Box2D and MiniGrid ranks reduce its Core16 score to 0.531 . [localizador](https://arxiv.org/html/2607.02440#S4)

## Lectura y límite

- Método: La lectura de 3 EvoPolicyGym : A Framework for Autonomous Policy Evolution describe la intervención y su construcción: EvoPolicyGym frames autonomous policy evolution as an agent-driven optimization loop for executable decision policies. In each run, a coding agent maintains a persistent policy workspace, submits candidate revisions for visible train episodes, receives server-generated rollout summaries and trajectories, and revises the policy under a fixed episode budget. The primary evaluation unit is a complete budget-constrained run, scored by the held-out return of its best validation checkpoint. The associated trajectory provides diagnostic evidence about how that outcome was reached. Figure 1 summarizes the visible…
- Límite: La lectura primaria permite comprobar método y resultados en el HTML, pero no convierte sus conclusiones en validación independiente. La ficha no demuestra transferencia fuera de los datasets, modelos, herramientas y condiciones descritos en 4 Experiments.
- Confianza editorial: Media
- Limitación: El cierre de la fuente señala: EvoPolicyGym casts autonomous policy improvement as a controlled evaluation of the systems agents build over time. Each harness–model agent edits an executable policy under a fixed interaction budget, learns only from visible train feedback, and is judged by hidden validation-selected heldout performance. The Core16 results show that high scores require more than isolated task wins: strong agents infer task-appropriate abstractions, translate feedback…
- Limitación: La ficha no demuestra transferencia fuera de los datasets, modelos, herramientas y condiciones descritos en 4 Experiments.

## Base de la confianza editorial

> Juicio editorial sobre la transferibilidad de esta lectura; no mide calidad académica ni efecto local.

| Criterio | Estado | Base observable |
|---|---|---|
| FUENTE PRIMARIA | DOCUMENTADO | Lectura primaria completa registrada sobre v1; comprobación: 2026-08-19 · lectura primaria completa; extracción editorial automatizada, revisión humana pendiente. |
| RÉPLICA LOCAL | PENDIENTE | No se ha registrado una réplica independiente en este sitio. El código o los datos enlazados, cuando existen, no cuentan como réplica. |
| LÍMITES | DOCUMENTADO | 3 límites declarados en la ficha. |
| APLICABILIDAD | ACOTADO | Hay una prueba de transferencia con entrada, métrica y parada; su resultado local todavía no se ha observado. |

- Regla editorial: Los criterios no se promedian automáticamente. Una fuente leída, un límite claro o un protocolo propuesto no equivalen a una réplica ni a un resultado local.

## Localizadores de evidencia
- [Fuente primaria · canonical](https://arxiv.org/abs/2607.02440): tipo abstract
- [HTML · lectura completa](https://arxiv.org/html/2607.02440): tipo abstract
- [Método · 3 EvoPolicyGym : A Framework for Autonomous Policy Evolution](https://arxiv.org/html/2607.02440#S3): tipo section
- [Evaluación · 4 Experiments](https://arxiv.org/html/2607.02440#S4): tipo section
- [Cierre · 6 Conclusion](https://arxiv.org/html/2607.02440#S6): tipo section

## Próxima prueba

- ¿La propuesta mejora agentes autónomos frente a la línea base actual?
- Métrica: Comparar la métrica principal de la fuente junto con calidad, coste, latencia y tasa de errores.
- Regla de parada: Parar si no aparece una mejora reproducible o si aumenta el riesgo, la complejidad o el coste sin compensación.

## Recursos reproducibles
- [EvoPolicyGym](https://github.com/Linzwcs/EvoPolicyGym)
- [EvoPolicyGym-Exp-data](https://huggingface.co/datasets/linzw/EvoPolicyGym-Exp-data)
- [the following issues](https://github.com/arXiv/html_feedback/issues)
- [list of packages that need conversion](https://github.com/brucemiller/LaTeXML/wiki/Porting-LaTeX-packages-for-LaTeXML)

## Enlaces relacionados

- [VAKRA](https://luiseduardodemiguel.com/research-ia/markdown/papers/vakra)
- [The Devil Is in the Interface](https://luiseduardodemiguel.com/research-ia/markdown/papers/devil-interface)
- [SkillSentry](https://luiseduardodemiguel.com/research-ia/markdown/papers/skillsentry)