Investigadores presentan SAGE, un banco de pruebas para ver si la IA asocia palabras con imágenes; GAR sube Hits@1 a 71,22 con Gemma3-12B
El trabajo presenta SAGE, un benchmark de selección entre 10 imágenes que unifica VWSD, VerSe y WikiDiverse para medir la relación entre términos e imágenes. Además propone GAR, un método sin entrenamiento que combina definiciones con verificación semántica guiada por restricciones. Con Gemma3-12B, el Hits@1 sube de 65,90 a 71,22 y el buen resultado en VWSD no se traslada igual a todos los subconjuntos.
Qué significa
Un modelo que funciona bien en un test concreto puede fallar en otras tareas de relación entre texto e imagen, y SAGE permite comprobarlo con un protocolo común. Sirve sobre todo a investigadores que comparan sistemas multimodales.
Fuentes originales
Resumen de Hoy en IA. Pulsa una fuente para leer la noticia completa en su idioma original.
- arXiv cs.CLLeer la noticia completa en arXiv cs.CL