Auditoría de las comparaciones de un informe semanal de LLM locales: 2 de 34 no coinciden con los datos
El autor revisa los 34 textos comparativos del informe semanal sobre cinco modelos locales probados con 52 preguntas. Comprueba cada comparación contra la tabla de puntuaciones. Dos no coinciden con los datos, y una de ellas atribuye a gemma:2b un puesto que en realidad ocupa el propio gemma:2b. La revisión no incluye prompts, respuestas ni tiempos, porque no están en los datos.
Qué significa
Quien use el informe semanal para elegir un modelo local debe verificar las comparaciones antes de fiarse de ellas: en esta muestra, casi el 6 % no coincidía con la tabla.
Fuentes originales
Resumen de Hoy en IA. Pulsa una fuente para leer la noticia completa en su idioma original.
- #LLMタグLeer la noticia completa en #LLMタグ