Sábado 24 de octubre de 2026 ·
Un estudio de la Universidad de Shandong concluye que los harnesses complejos encarecen los agentes de programación sin mejorar resultados
Útil para
Los investigadores Liu y Han, de la Universidad de Shandong, midieron con el modelo fijo cuánto aporta el harness de un agente de programación, es decir, su system prompt, herramientas y gestión de contexto. Cambiar de harness altera los resultados casi lo mismo que una segunda ejecución, pero el coste en tokens puede triplicarse. Las ventajas de hasta 20 puntos que anuncian los proveedores suelen basarse en una sola ejecución, y en SWE-bench Verified la misma configuración varía hasta 6 puntos.
Qué significa
Quien compare agentes de programación por sus puntuaciones publicitarias puede estar midiendo azar y no la calidad de la herramienta. Para las empresas, el gasto en tokens pesa más que el harness elegido, según el estudio.
Cómo te afecta
- CTO y tecnología
No compares agentes de programación por puntuaciones publicitarias de una sola ejecución: en SWE-bench Verified la misma configuración varía hasta 6 puntos. Antes de estandarizar, mide coste en tokens y resultados con tus propias tareas.
Fuentes originales
Resumen de Hoy en IA. Pulsa una fuente para leer la noticia completa en su idioma original.
- The Decoder (DE)Leer la noticia completa en The Decoder (DE)
También ese día
Todas las noticias de IA del sábado 24 de octubre de 2026 ->