Martes 13 de octubre de 2026 ·
La vida media de un benchmark de IA se reduce a la mitad: de 38 a 19 meses
Un análisis de 224 benchmarks publicados entre 2018 y 2026 por nueve laboratorios, entre ellos OpenAI, Anthropic, Google, Meta y DeepSeek, sitúa el periodo de semidesintegración en 23 meses. Los benchmarks lanzados antes de 2023 duraban 38 meses de media, frente a 19 de los posteriores. Un benchmark muere cuando el mejor modelo supera el 90% o el nivel humano, o cuando sus creadores lo declaran saturado o defectuoso. Cada séptimo benchmark nuevo cae por sus propios defectos, y en los entornos de agentes esto explica casi la mitad de las bajas.
Qué significa
Las puntuaciones de referencia que se usan para comparar modelos de IA caducan ahora en la mitad de tiempo que antes. Los benchmarks nuevos no son más sencillos; los modelos simplemente avanzan más rápido y agotan antes el margen de mejora de cada prueba.
Fuentes originales
Resumen de Hoy en IA. Pulsa una fuente para leer la noticia completa en su idioma original.
- Habr Machine Learning (RU)Leer la noticia completa en Habr Machine Learning (RU)
También ese día
Todas las noticias de IA del martes 13 de octubre de 2026 ->