# IAPO: Input Attribution-Aware Policy Optimization for Tool Use in Small Multimodal Agents
> Ficha editorial pública de Research IA. Estado: Lectura primaria completa. La interpretación editorial no sustituye la fuente primaria.

- Página canónica: https://luiseduardodemiguel.com/research-ia/papers/iapo-input-attribution-aware-policy-optimization-for-tool-use-in-small-m
- Fuente primaria: https://arxiv.org/abs/2606.11652
- Versión leída: v1
- Fuente comprobada: 2026-08-19 · lectura primaria completa; extracción editorial automatizada, revisión humana pendiente
- Autores: Yifan Yang, Zhen Zhang, Jiayi Tian, Liyan Tan, Zheng Zhang
- Fecha del corte: 10 JUNIO 2026.
- Área: AGENTES · SEGURIDAD · MULTIMODAL

## Tesis y contexto

Método RL para mejorar uso de herramientas en agentes multimodales pequeños. En vez de recompensas binarias frágiles, alinea la atribución del modelo pequeño con la de un profesor más fuerte. En Qwen2.5-VL-3B mejora la precisión VQA un 3% medio en seis test sets.

- Problema: Los SLM multimodales tienen dificultades para aprender tool-use con recompensas escasas o trayectorias anotadas inexistentes.
- Por qué importa: Si queremos agentes baratos/locales, el tool-use en modelos pequeños será clave.

## Evidencia reportada

- **reported-result**: In contrast, larger models such as Qwen-2.5VL-7B and GPT-4o achieve substantially better results under inference-only tool use, suggesting that effective tool use remains challenging for small multimodal models. [localizador](https://arxiv.org/html/2606.11652#S4)
- **reported-result**: Recent reward-design methods, such as TRM and ToolRL, improve RL-based visual tool calling over vanilla GRPO. [localizador](https://arxiv.org/html/2606.11652#S4)
- **reported-result**: Notably, IAPO achieves stronger performance than TRM even when paired with a substantially smaller teacher model. [localizador](https://arxiv.org/html/2606.11652#S4)
- **reported-result**: As shown by the results on the out-of-distribution CharXiv benchmark, IAPO achieves substantially better performance than existing methods. [localizador](https://arxiv.org/html/2606.11652#S4)

## Lectura y límite

- Método: La lectura de 3 Methods describe la intervención y su construcción: In this section, we start by presenting the problem formulation under the vanilla GRPO setting and analyze the limitations of vanilla GRPO reward design for visual tool-calling tasks. We follow the vanilla-GRPO-based training framework for visual tool-calling agents introduced in VTool-R1 ( 25 ) . Concretely, we consider a VLM policy \pi_{\theta} , parameterized by \theta , for multimodal tool-calling. In each rollout, the policy takes an image \bm{I} and a prompt \bm{x} as input, and generates an output response \bm{y} . As illustrated in Fig. 2 , we divide the input prompt \bm{x} into an ordered sequence of…
- Límite: La lectura primaria permite comprobar método y resultados en el HTML, pero no convierte sus conclusiones en validación independiente. La ficha no demuestra transferencia fuera de los datasets, modelos, herramientas y condiciones descritos en 4 Experiments.
- Confianza editorial: Media
- Limitación: El cierre de la fuente señala: We also conduct a hyperparameter study on the importance-score coefficient \lambda and used in IAPO. The results are reported in Table 3 . As shown in the table, a relatively small coefficient of 0.1 combined with a decay rate of 0.01 achieves the best performance.
- Limitación: La ficha no demuestra transferencia fuera de los datasets, modelos, herramientas y condiciones descritos en 4 Experiments.

## Localizadores de evidencia
- [Fuente primaria · canonical](https://arxiv.org/abs/2606.11652): tipo abstract
- [HTML · lectura completa](https://arxiv.org/html/2606.11652): tipo abstract
- [Método · 3 Methods](https://arxiv.org/html/2606.11652#S3): tipo section
- [Evaluación · 4 Experiments](https://arxiv.org/html/2606.11652#S4): tipo section
- [Cierre · 5 Conclusion](https://arxiv.org/html/2606.11652#S5): tipo section

## Próxima prueba

- ¿La propuesta mejora agentes móviles frente a la línea base actual?
- Métrica: Comparar la métrica principal de la fuente junto con calidad, coste, latencia y tasa de errores.
- Regla de parada: Parar si no aparece una mejora reproducible o si aumenta el riesgo, la complejidad o el coste sin compensación.

## Recursos reproducibles
- [the following issues](https://github.com/arXiv/html_feedback/issues)
- [list of packages that need conversion](https://github.com/brucemiller/LaTeXML/wiki/Porting-LaTeX-packages-for-LaTeXML)
- [developer contributions](https://github.com/brucemiller/LaTeXML/issues)

## Enlaces relacionados

- [VAKRA](https://luiseduardodemiguel.com/research-ia/markdown/papers/vakra)
- [The Devil Is in the Interface](https://luiseduardodemiguel.com/research-ia/markdown/papers/devil-interface)
- [SkillSentry](https://luiseduardodemiguel.com/research-ia/markdown/papers/skillsentry)