«Mejoró significativamente» no dice cuánto mejoró
Un p < 0,05 solo indica que una diferencia probablemente no es fruto del azar, pero no su tamaño. Con muestras suficientemente grandes, diferencias irrelevantes en la práctica resultan estadísticamente significativas. Por eso conviene informar el tamaño del efecto junto con el valor p. Como referencia orientativa, un tamaño de efecto estandarizado de 0,2 a 0,5 se considera pequeño, de 0,5 a 0,8 mediano y por encima de 0,8 grande, aunque estos umbrales dependen del campo. El texto está incompleto y no llega a la sección de diseño del experimento.
Qué significa
Al evaluar un nuevo modelo de IA, no basta con que la mejora sea «significativa»: hay que pedir cuánto mejora y fijar de antemano la mejora mínima que merece la pena para tu caso.
Fuentes originales
Resumen de Hoy en IA. Pulsa una fuente para leer la noticia completa en su idioma original.
- #LLMタグLeer la noticia completa en #LLMタグ