Jueves 22 de octubre de 2026 ·

SANE: un sistema con agentes que prueba automáticamente la fiabilidad de los jueces LLM

Útil para Programadores 68%

SANE es un marco basado en agentes que genera pruebas de fiabilidad para los jueces LLM, los modelos que puntúan otras respuestas en evaluaciones y entrenamientos. Primero identifica las capacidades de cada evaluador y luego crea perturbaciones con relaciones esperadas en la puntuación. Según sus autores, en cinco dominios genera 3,7 veces más casos alineados con la intención del evaluador.

Qué significa

Los equipos que usan jueces LLM para comparar modelos podrán detectar antes si sus evaluadores fallan ante cambios que no deberían alterar la puntuación.

Fuentes originales

Resumen de Hoy en IA. Pulsa una fuente para leer la noticia completa en su idioma original.

También ese día

Todas las noticias de IA del jueves 22 de octubre de 2026 ->