Lunes 2 de noviembre de 2026 ·
Qistas, un protocolo previo al registro para evaluar la equidad de los modelos de lenguaje, probado en Irak
Los autores presentan Qistas, un protocolo para medir cómo los modelos de lenguaje tratan a los grupos sociales, religiosos y regionales de una sociedad, pensado para adaptarse a distintos países y aplicado primero a Irak. Señalan que los benchmarks de equidad actuales son mayoritariamente en inglés y con categorías estadounidenses. La versión piloto mide la simetría de procedimiento en pares contrafactuales, la negativa diferencial, la dependencia de estereotipos y el encuadre terminológico de hechos documentados, con pruebas estadísticas pareadas y un análisis de potencia fijado antes de los datos. Publican los materiales de creación y la primera prueba de campo.
Qué significa
Ofrece una forma de medir sesgos de los modelos de lenguaje fuera del marco anglo-estadounidense, con hipótesis fijadas antes de ejecutar los modelos, lo que impide elegir resultados a posteriori. El método puede reutilizarse en otros países.
Fuentes originales
Resumen de Hoy en IA. Pulsa una fuente para leer la noticia completa en su idioma original.
- arXiv cs.CLLeer la noticia completa en arXiv cs.CL
También ese día
Todas las noticias de IA del lunes 2 de noviembre de 2026 ->