AI大運動会: ocho modelos de IA comparados con los mismos ocho encargos
El autor comparó ocho modelos de lenguaje mediante Amazon Bedrock desde Tokio, con los mismos encargos y criterios de evaluación, y otra IA como juez. En la prueba, el modelo mejor valorado obtuvo el primer puesto en los siete encargos puntuados. Los tres mejores añadieron entre 0,4 y 2,2 frases inventadas por cada 100 frases, y los dos modelos pequeños que se pueden ejecutar en un ordenador personal, entre 15 y 18. El ranking de los puestos 1 a 3 está en la parte de pago del artículo. El autor aclara que los resultados valen solo para estas tareas y condiciones.
Qué significa
Al usar un modelo para resumir documentos, conviene revisar si añade datos que no están en la fuente, porque la proporción varía mucho entre modelos.
Fuentes originales
Resumen de Hoy en IA. Pulsa una fuente para leer la noticia completa en su idioma original.
- #LLMタグLeer la noticia completa en #LLMタグ