Jueves 22 de octubre de 2026 ·
SkillEval: evaluar LLMs por habilidades concretas con modelos de diagnóstico cognitivo
Útil para
Investigadores proponen SkillEval, un método que descompone los resultados de los modelos de lenguaje en habilidades concretas en lugar de una nota media. Usa LLMs para detectar habilidades en las preguntas y modelos de diagnóstico cognitivo de la psicometría para estimar la capacidad de cada modelo en cada una. Probado con 3.811 LLMs y 9.523 preguntas de cinco benchmarks, reduce más de 60% el coste de inferencia en enrutamiento de consultas y mejora el rendimiento.
Qué significa
Quien compare modelos o decida cuál usar para cada tarea tendrá un perfil por habilidades en vez de una puntuación única. El enrutamiento de consultas a modelos más eficientes reduce el gasto de cómputo sin perder calidad.
Fuentes originales
Resumen de Hoy en IA. Pulsa una fuente para leer la noticia completa en su idioma original.
- arXiv cs.CLLeer la noticia completa en arXiv cs.CL
También ese día
Todas las noticias de IA del jueves 22 de octubre de 2026 ->