Lo esencial antes de invertir más tiempo.
Benchmark coreano para evaluar búsqueda exhaustiva: no encontrar una respuesta, sino completar tablas enteras de miembros y atributos. Evalúa 20 agentes y muestra que recuperan entidades mejor que filas completas; Item-F1 alto, Row-F1 mucho más bajo.
Figure 3 traces this cascade per model: an agent that recovers the full thirty-four-row election grid yet mis-fills a single turnout or a winner’s age scores high on Item-F1 and far lower on Row-F1.
Resultado reportado con fuente enlazada · 5 localizadores disponibles.La lectura primaria permite comprobar método y resultados en el HTML, pero no convierte sus conclusiones en validación independiente. La ficha no demuestra transferencia fuera de los datasets, modelos, herramientas y condiciones descritos en Results.
Comparar la métrica principal de la fuente junto con calidad, coste, latencia y tasa de errores.
Benchmark coreano para evaluar búsqueda exhaustiva: no encontrar una respuesta, sino completar tablas enteras de miembros y atributos. Evalúa 20 agentes y muestra que recuperan entidades mejor que filas completas; Item-F1 alto, Row-F1 mucho más bajo.
Qué está reportado y qué conviene comprobar.
Figure 3 traces this cascade per model: an agent that recovers the full thirty-four-row election grid yet mis-fills a single turnout or a winner’s age scores high on Item-F1 and far lower on Row-F1.
contexto: Results
Second, the open-weight DeepSeek-V4-Pro (Row-F1 45.0) stays competitive with the frontier: it ranks mid-pack among the proprietary systems—behind the Claude-Opus line and both Gemini-3.1 models, yet ahead of GPT-5.4, Claude-Sonnet-4.6, and every smaller proprietary tier, so the best open model still outscores half the proprietary field.
contexto: Results
Membership holds up across tiers: Item-F1 is roughly flat, and even rises on Hard , where the sports-season grids make the set systematically enumerable—so the tier drop is a row-completion effect, not a retrieval one.
contexto: Results
A.X-4.0 recovers membership about as well as a mid-tier open model (Item-F1 71.7) but cannot fill the cells (Row-F1 24.2); Solar-Open-2-preview’s far lower Item-F1 (44.0), by contrast, is a structured-output failure rather than a search one—it returns a scorable table only 62.7% of the time, often searching extensively and then emitting its findings as prose or a numbered list instead of the requested table.
62.7% · contexto: Results
Qué estudiaron y qué cambia.
La síntesis está separada de los resultados reportados y de las inferencias.PROBLEMA / La señal entra en el radar porque los benchmarks web miden profundidad, no exhaustividad.
MÉTODO / La lectura de Related Work describe la intervención y su construcción: A browsing agent is a language model that acts—reasoning, calling tools, and reading back what it finds—a loop established by ReAct [ Yao et al. 2023 ] and by tool-augmented models that teach themselves to invoke APIs [ Schick et al. 2023 , Patil et al. 2024 , Qin et al. 2024 ] . Pointed at the open web, such agents have been studied as browser-assisted question answerers [ Nakano et al. 2021 ] and as navigators of real and simulated sites [ Yao et al. 2022 , Deng et al. 2023 , He et al. 2024 , Zhou et al. 2024 ] , and stress-tested by agent suites such as AgentBench [ Liu et al. 2024 ] , GAIA [ Mialon et al.… [Fuente: https://arxiv.org/html/2606.27595#Sx2]
RESULTADO / La sección Results informa: Figure 3 traces this cascade per model: an agent that recovers the full thirty-four-row election grid yet mis-fills a single turnout or a winner’s age scores high on Item-F1 and far lower on Row-F1. Second, the open-weight DeepSeek-V4-Pro (Row-F1 45.0) stays competitive with the frontier: it ranks mid-pack among the proprietary systems—behind the Claude-Opus line and both Gemini-3.1 models, yet ahead of GPT-5.4, Claude-Sonnet-4.6, and every smaller proprietary tier, so the best open model still outscores half the proprietary field. Membership holds up across tiers: Item-F1 is roughly flat, and even rises on Hard , where the sports-season grids make the set systematically enumerable—so the tier drop is a row-completion effect, not a retrieval one. [Fuente: https://arxiv.org/html/2606.27595#Sx5]
LÍMITE / El cierre de la fuente señala: My coverage has several edges. One is category skew: the Hard , 2-D tier is still sports-season heavy (roughly 67%), because a compact season table is the most reliably buildable cross-product and non-sports 2-D coverage (e.g. elections) is only partial. Also, each table’s source is anchored at the primary membership page—one source URL per table rather than per attribute—though cross-source verification was applied at build time, and performance is… La transferencia a lead generation requiere repetir la comparación con datos y criterios propios [Fuente: https://arxiv.org/html/2606.27595#Sx7].
La lectura primaria permite comprobar método y resultados en el HTML, pero no convierte sus conclusiones en validación independiente. La ficha no demuestra transferencia fuera de los datasets, modelos, herramientas y condiciones descritos en Results.
- PROBLEMA
- Los benchmarks web miden profundidad, no exhaustividad.
- MÉTODO
- La lectura de Related Work describe la intervención y su construcción: A browsing agent is a language model that acts—reasoning, calling tools, and reading back what it finds—a loop established by ReAct [ Yao et al. 2023 ] and by tool-augmented models that teach themselves to invoke APIs [ Schick et al. 2023 , Patil et al. 2024 , Qin et al. 2024 ] . Pointed at the open web, such agents have been studied as browser-assisted question answerers [ Nakano et al. 2021 ] and as navigators of real and simulated sites [ Yao et al. 2022 , Deng et al. 2023 , He et al. 2024 , Zhou et al. 2024 ] , and stress-tested by agent suites such as AgentBench [ Liu et al. 2024 ] , GAIA [ Mialon et al.…
- TIPO DE EVIDENCIA
- La sección Results informa 4 hallazgo(s) extraído(s) desde la fuente. El resultado principal se conserva con el localizador de sección https://arxiv.org/html/2606.27595#Sx5.
- LÍMITE
- La lectura primaria permite comprobar método y resultados en el HTML, pero no convierte sus conclusiones en validación independiente. La ficha no demuestra transferencia fuera de los datasets, modelos, herramientas y condiciones descritos en Results.
La lectura también deja rastro.
Guarda una observación junto a la evidencia. Tú escribes aquí; los agentes pueden añadir notas por MCP y aparecerán identificados.
LECTURA AMPLIADAMetodología, implicaciones y preguntas para volver al paper.+
La lectura de Related Work describe la intervención y su construcción: A browsing agent is a language model that acts—reasoning, calling tools, and reading back what it finds—a loop established by ReAct [ Yao et al. 2023 ] and by tool-augmented models that teach themselves to invoke APIs [ Schick et al. 2023 , Patil et al. 2024 , Qin et al. 2024 ] . Pointed at the open web, such agents have been studied as browser-assisted question answerers [ Nakano et al. 2021 ] and as navigators of real and simulated sites [ Yao et al. 2022 , Deng et al. 2023 , He et al. 2024 , Zhou et al. 2024 ] , and stress-tested by agent suites such as AgentBench [ Liu et al. 2024 ] , GAIA [ Mialon et al.…
Muchos casos reales son “hazme una lista completa fiable”.
La lectura primaria permite comprobar método y resultados en el HTML, pero no convierte sus conclusiones en validación independiente. La ficha no demuestra transferencia fuera de los datasets, modelos, herramientas y condiciones descritos en Results.
Cómo lo llevaría a un proyecto
Probar la propuesta en lead generation reproduciendo primero la comparación y registrando calidad, coste, latencia y errores.
Preguntas que conviene probar
- ¿La mejora se mantiene cuando lead generation cambia de dominio o distribución?
- ¿Qué componente del método explica la mayor parte del resultado y qué baseline lo pone realmente a prueba?
Si tuviera que convertirlo en una prueba mañana.
Mi lectura
La pregunta operativa es si lead generation puede medirse con una línea base y un criterio de parada claros.
Esta última frase es una inferencia editorial a partir del paper y de sus posibles implicaciones; no es una afirmación de los autores.